【eclipse＋hadoop】eclipse连接虚拟机中的hadoop

最新推荐文章于 2021-05-14 12:38:52 发布
最新推荐文章于 2021-05-14 12:38:52 发布
阅读量2.9k 收藏 31
点赞数 2
分类专栏： 工具类 文章标签： 大数据 hadoop eclipse
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_37367702/article/details/97514258
版权

前提：虚拟机中hadoop环境配置完成

1、先将hadoop解压到电脑中（与虚拟机中的版本需一致），需要加插件winuntil.exe到bin下后面才能运行文件不然会报错Could not locate executable null\bin\winutils.exe

记得配置hadoop环境变量E:\java\hadoop2.7.7\bin

新建环境变量：HADOOP_HOME

 

PATH:

或者将以下文件拷贝到c：/window/system32中 

2、将hadoop-eclipse-plugin-2.7.1里面的放在eclipse/plugins文件夹下

3、打开eclipse-》window-》perspective-》oth

最低0.47元/天 解锁文章
Q蕾
关注
  • 2
    点赞
  • 踩
  • 31
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Eclipse连接Hadoop（HDFS）
actionbean的博客
09-29 4580
Eclipse连接Hadoop（HDFS）
Hadoop完全分布搭建(这里以3台主机为例)＋Hbase＋Eclipse连接
weixin_60263012的博客
09-29 2388
总共要修改的配置文件全部都在hadoop/etc/hadoop目录下，其中hdfs-site.xml这个文件需要设置3个目录来存放一些hadoop运行过程中的临时数据，也就是在hadoop目录下，创建一个dfs和tmp，再在dfs目录下创建name和data目录。分别是hadoop-env.sh，yarn-env.sh，mapred-env.sh。打开Eclipse软件 --> 新建Java项目(File --> New --> Other --> Java Project --> 输入项目名称)
如何在Windows中使用Eclipse访问虚拟机Linux系统中的hadoop（伪分布式）
aoaoshuai11111的博客
11-14 322
　　因为计算机配置过低，在虚拟机里几乎无法使用Eclipse，效率极低！ 　　所以现在尝试使用Windows下Eclipse操作虚拟机中Hadoop，步骤如下： 　　开发环境：Hadoop2.7.1，Ubuntu Kylin 14.04 　　1.修改配置文件core-site.xml，将其中localhost改为虚拟机的ip地址： 　　在Ubuntu中，打开控制台，使用命令ifc...
eclipse连接虚拟机的hadoop2.7.7一直出错解决办法
hewsonchen的博客
04-21 962
没有配置主机名，按下面的步骤重新配置就好了。 0.关闭防火墙 执行：service iptables stop 1.配置主机名 执行：vim /etc/sysconfig/network 编辑主机名 2.配置hosts文件 执行：vim /etc/hosts 3.配置免密码登录 执行：ssh-keygen 然后一直回车...
使用eclipse连接hadoop失败情况
xiaoxiao315的专栏
06-08 2491
最近研究Hadoop开发，遇到Eclipse同在Linux（虚拟机）下执行没有问题，如果Eclipse在Window下执行一直报连接失败的问题，经过多方查找资料及源码分析，总结如下： 环境： Windows：Eclipse Hadoop客户端程序 Linux（虚拟机）：部署Hadoop服务 解决方法： 1、服务都正常启动（jps命令查看）       这个问题比较坑，不知道什么情况下竟
eclipse+hadoop+wordCount+sort.docx
01-03
eclipse+hadoop+wordCount+sort 本文档主要介绍了如何在 Eclipse 中搭建 Hadoop 开发环境，并提供了两个示例程序：WordCount 和 Sort。 一、搭建 Hadoop 开发环境 要使用 Hadoop，在 Eclipse 中需要安装相应的...
win7+eclipse+hadoop开发环境搭建[收集].pdf
10-12
在Windows 7操作系统中搭建Hadoop开发环境，通常需要借助Eclipse IDE和虚拟机软件，如Ubuntu，来实现。以下是一步步的详细步骤： 1. **安装虚拟机和Ubuntu操作系统**： - 首先，你需要下载并安装虚拟机软件，如...
VM虚拟机下配Eclipse+JDK+Tomcat+Hadoop环境搭建.pdf
最新发布
11-29
【标题】: "VM虚拟机下配Eclipse+JDK+Tomcat+Hadoop环境搭建" 在搭建基于VM虚拟机的开发环境时，通常需要安装一系列的软件来支持开发和运行Java应用程序，以及处理分布式计算任务。以下是详细的步骤： 1. **安装...
VM虚拟机下配Eclipse+JDK+Tomcat+Hadoop环境搭建
10-20
在本文中，我们将详细介绍如何在VM虚拟机中安装和配置Eclipse、JDK、Tomcat和Hadoop环境。 一、安装VM虚拟机 安装VM虚拟机非常简单，只需要按照提示逐步安装即可。需要注意的是，在卸载VM虚拟机时，需要使用强力点...
VM虚拟机下配Eclipse+JDK+Tomcat+Hadoop环境搭建.docx
11-29
以上步骤完成后，你将在VMware虚拟机的CentOS环境中拥有一个完整的开发环境，包括Eclipse IDE用于编写Java代码，JDK用于编译和运行Java程序，Tomcat用于部署和测试Web应用，以及Hadoop用于处理大数据任务。...
使用Eclipes，通过Java API 实现本地到远程hadoop的文件上传，下载，创建目录
Today_2018的博客
03-23 383
1、通过远程连接软件（WinSCP）将Linux虚拟机中的hadoop文件下载至本地目录 2.使用Eclipes新建一个项目取名UploadFile1 3、加载相应的jar包 4、将hadoop路径下的所有jar包加载进去 5、加载完成结果图 6.新建一个类 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Sd6bEPvF-1584970453...
window中eclipse连接hadoop常见错误
南方的乖崽崽的博客
06-26 900
1、打开eclipse时，没有发现hadoop map/reduce 没有安装对应的hadoop-eclipse-plugin 将下载好的jar包，移动到eclipse安装目录里的dropins中。即可 2、新建hadoop连接时的端口 没有人为指定时默认为9001，9000。也可以自行查看文件core-site.xml中设置fs.defaultFS选项 3、在eclipse中出现的错误: 在类 com.yyq.hdfs.HDFSDemo 中找不到 main 方法, 请将 main 方法定义为:
Windows环境下采用eclipse连接虚拟机中的Hadoop伪分布式集群
热门推荐
quintind的专栏
09-06 1万+
目的及意义 学会搭建伪分布式集群环境，以便于理解MapReduce及HDFS； 采用eclipse与伪分布式集群连接有利于分布式程序的调试； 现在网络上的文章多是介绍如何搭建伪分布式集群或者是仅介绍在eclipse中如何连接已建立好的伪分布式集群，且大部分介绍都是基于hadoop1.x系列。 软件列表 序号 软件名称 功能 1 hadoop-2.6.0-x64.tar.gz 实
win7中的eclipse连接虚拟机中Linux(Ubuntu)的Hadoop (附上配置时遇到的错误和解决的方法)
JimmyLincole的专栏
10-28 3436
参考文档： http://blog.csdn.net/hitwengqi/article/details/8008203 http://my.oschina.net/vigiles/blog/132289 Hadoop的运行模式共有三种： 1、单机模式（standalone）（默认模式） 2、伪分布模式（Pseudo-DistributedMode）（所有的守护进程都在同
linux eclipse mapreduce jar,window10 下在eclipse把MapReduce程序打包成jar远程传送到hadoop2.8.0集群运行...
weixin_42522953的博客
05-14 418
前期准备：1. win10 配置jdk2. eclipse安装3. hadoop-2.8.0tar.gz 解压，后续需要导入jar包4. linux CentOS 7 hadoop集群配置正式工作：1. 在eclipse中新建java项目编写MapReduce程序：wordcount测试程序2. 导入需要的hadoop jar包hadoop-2.8.0\share\hadoop\commonhad...
如何配置eclipse访问虚拟机进行hadoop编程
WhatSpace的专栏
07-18 785
最近研究了一下HADOOP，所以在LINUX上做一些配置后想测试编程，由于之前一直都用eclipse编写JAVA，所以研究了一下如何配置eclipse访问虚拟机进行编程，现将方法共享一下，(注：我用的是hadoop2.7.3,linux用的的是乌班图)
hadoop+eclipse遇到的问题
WuWuWu_you的博客
10-19 1849
最近在物理机上部署hadoop集群，部署之前学习了很多理论知识，实际部署的时候还是遇到了很多问题。 在安装目录下有个logs/文件夹，查看WARN,Error,Exception关键字，几乎所有的问题都会得到解决 1.hadoop基础视频 这个视频讲解得很通透，易懂。HDFS API部分。 2.大前提是jdk和hadoop版本要选对，不然会很麻烦。 3.然后eclipse最好也是安装到linux上，且安装eclipse的这台服务器的jdk版本要和hadoop集群的jdk为一个版本。 4.eclipse这台服
windows10下 eclipse连接虚拟机中的Hadoop伪分布式集群
Kingsley's Blog
08-21 2736
在windows用eclipse连接hadoop之后，可以便于进行mapreduce开发，非常方便，如果在虚拟机里面用eclipse的话 ，emmmmmm，你会卡到怀疑人生。 首先需要去下载eclipse，这个直接官网就ok link:https://www.eclipse.org/downloads/ 还需要下载eclipse连接hadoop的插件 hadoop-...
Windowns上的eclipse连接虚拟机上的hadoop集群设置
10-14 5234
（我的hadoop版本是hadoop-0.20.2） （1）win+R，输入cmd，ping虚拟机的ip，查看是否能够ping通 （2）关闭虚拟机中的防火墙： a) service iptables stop 立即生效 b) chkconfig iptables off 重启后生效 （3）在windowns的hosts（C:\WINDOWS\system32\drivers\etc）文

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值