在Ubuntu下安装eclipse并为eclipse配置hadoop开发环境(关于eclipse下无法找到hadoop插件的解决办法)

2、为eclipse配置hadoop开发环境

(1)安装hadoop插件

下载hadoop在eclipse下的插件,我的插件是:hadoop-eclipse-plugin-1.2.1.jar,下载地址:

http://download.csdn.net/detail/chenyuangege/8709267 ,注意这个插件的版本号要和你安装的hadoop版本号相对应,比如我这里安装的hadoop是:hadoop-1.2.1.tar.gz ,那么你的插件就得是相应的版本号:hadoop-eclipse-plugin-1.2.1.jar 。下载此插件后要放在eclipse/dropins目录下,不要放在eclipse/plugins目录下,然后重启eclipse。

(2)选择Windows-->open perspective-->other,在弹出的框中选中"Map/Reduce",这样子就可以切换到Map/Reduce工作目录了,如下图所示:



(3)在Eclipse中指定Hadoop的安装目录。选择“Window”下的“Preference”,然后弹出一个窗体,在窗体的左侧中找到“Hadoop Map/Reduce”选项,点击此选项,选择Hadoop的安装目录(如我的Hadoop目录:/home/cy/Hadoop/hadoop-1.2.1)。 如下图所示:


(4)配置Map/Reduce Locations。选择Map/Reduce location标签页,点击右键选择new hadoop location新建hadoop location,如下图所示:



注意:上图中Location name 可以随便去自己喜欢取的名字,我自己取的是:localhost;

Map/Reduce Master:

Host:(即/home/cy/Hadoop/hadoop-1.2.1/conf/mapred-site.xml中ip,我自己的是slave2)
Port:(即/home/cy/Hadoop/hadoop-1.2.1/conf/mapred-site.xml中端口,我自己的是9001)

DFS Master:
Use M/R Master host:前面的不要勾上(因为我的NameNode和JobTracker不在一个机器上),要是你的NameNode和JobTracker在一个机器上的话就要勾上
Host(即/home/cy/Hadoop/hadoop-1.2.1/conf/core-site.xml中ip,我自己的是master))
Port (即/home/cy/Hadoop/hadoop-1.2.1/conf/core-site.xml中端口,我自己的是9000))
User name:cy(操作hadoop的用户)


注意:安装/home/cy/Hadoop/hadoop-1.2.1/conf/目录下的core-site.xml,hdfs-site.xml和mapred-site.xml文件中的参数和对应的值,把上图所示中的相应参数设置成对应的值。

(5)点击“finish”之后,会发现Eclipse软件下面的“Map/Reduce Locations”出现一条信息, 就是我们刚才建立的“Map/Reduce Location ”,如下图所示:



(6)如果此时你还没有启动集群的话,那就启动一下集群。

(7)如果成功的话,就可以看到hdfs的文件系统了,如下图所示:



如果出现上面的目录结构,那么恭喜你了,说明你在ubuntu下eclipse的hadoop开发环境已经配置成功了,接下来就可以在hadoop集群下编写map/reduce 程序了。

我现在也在学习hadoop,以后还会继续写我学hadoop的相关经历。


  • 3
    点赞
  • 14
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值