hadoop eclipse 插件 安装

注:以下指南均在ubuntu下,如果你是win+cygywin模式,可能有差别(没研究不多说),仅供参考,如有误人之处还望指正

            别看区区一个插件,还真是复杂,光是版本问题就捣鼓了好长时间,网上也没有成熟的案例都在讨论+询问,我这现在捣鼓明白了,跟大家分享一下:

1. 保证eclipse是3.3版本。eclipse 要用3.3.*版本(Yahoo指定版本),因为其他的版本不一定支持;
   保证hadoop版本是0.20.2,其他版本有可能会出现和eclipse plugin不兼容的情况,比如无法点击'New Map/Reduce Location',或者窗口左侧试图的'Project Explorer'里没有出现'DFS Location'等。

    第一点很重要,如果你eclipse或者hadoop版本不符合上面的,而又捣鼓不明白,不妨先换成上面的版本,试一下哈

2. 到/usr/local/hadoop/contrib/eclipse-plugin目录下,拷贝hadoop eclipse插件hadoop-0.20.2-eclipse-plugin.jar到eclipse安装目录的plugins文件夹下

   hadoop的eclipse插件不用去网上下,在hadoop发布的包里就有,而且都是跟这发布的版本走的,很方便

3. 启动eclipse, 到‘Windows’ -> ‘Preference’ -> 'Hadoop Map/Reduce',配置Hadoop Installation Directory,本例为/usr/local/hadoop

 


4. 在'Windows' -> 'Open Perspective' -> 'Other'里,选择蓝大象'Map/Reduce'


5. 在'Windows' -> 'Show View' -> 'Other'里,选择'MapReduce Tool' -> 'Map/Reduce Location'

6. 在窗口下方出现的黄大象'Map/Reduce Location'空白处,右击选择'New Map/Reduce Location'


7. 在弹出来的对话框里,根据core-site.xml 和 mapred-site.xml里的端口,进行填写:
    其中Location name 任意


8. 在窗口左侧试图的'Project Explorer'里,点击'DFS Location',就会出现HDFS的目录级


PS:
1.如果你之前装过其他版本的hadoop,或者eclipse,按照此教程又重新装了一遍,没关系,按照此教程,只要记得在打开eclipse选择workspace的时候,不要选择以前创建过的eclipse文件夹,结果就会跟教程里预期的一样,不会出现异常。

2. 要想在第8步中的'DFS Location'下出现HDFS目录级,Ubuntu的登录用户必须对hadoop有权限(比如我的系统有两个用户,一个自己用的,一个为hadoop专门建的。那么登录操作系统时,直接用hadoop用户登录,同时eclipse软件对hadoop也是可操作的才行)

 3. 如果想在eclipse里直接运行你的mapreduce程序,请参考http://hi.baidu.com/liangkejia_jaja/blog/item/09701a31e8aa1759ac4b5f57.html


转载请注明:http://hi.baidu.com/liangkejia_jaja/blog/item/55c04980fe3ef28af703a650.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值