windows下Eclipse安装hadoop1.1.2插件连接hadoop集群

1、下载Eclipse解压。
2、把hadoop-eclipse-plugin-1.1.2.jar放到eclipse的plugs目录下。

      我的hadoop集群用的版本:hadoop1.1.2
       hadoop0.20以后的版本的安装目录下contrib/没有eclipse的hadoop-*-eclipse-plugin.jar插件,需要自己用ant编译。
       源文件在:hadoop-x.y.z/src/contrib/eclipse-plugin 下,注意:需要下载源目录的包,如查下载的是bin的压缩包,里面是没有eclipse插件的源文件的。
      
3、打开Eclipse
      window-- Preferences  出现Hadoop Map/Reduce
      配置Hadoop installation directory:

windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - IT AIR

注意:我的宿主机windows上并没有安装hadoop, hadoop安装在VM中的centos中
           在windows下建了一个目录F:/myHadoop 把centos hadoop安装根目录下的jar包拷过来。

4、新建工程:Map/Reduce Project

windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - IT AIR
 
配置hadoop location:
windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - IT AIR
 

 5、刷新DFS Locations 列出HDFS服务器上的上的目录:
windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - IT AIR
 
6、问题:
    在Eclipse上可以列出hadoop集群上的目录,但不能创建文件,上传文件:


windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - IT AIR
 
原因:windows下Eclipse安装了hadoop插件,默认使用的是windows当前用户去操作hadoop,而我的hadoop集群当前的用户是grid

而Eclipse中hadoop locations 的高级参数配置,是不能修改这个用户的:
windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - IT AIR
 
解决方法:
在windows用户和组的管理中,把当前用户修改成hadoop组grid用户。
但我的机器系统是win7家庭版,打不开用户和组管理:

windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - IT AIR
 
不能已,用另一种方案:
windows上新建一个grid用户,然后再打开Eclipse,创建工程,进行以上的配置DFS Loactioins
发现这时,在Eclipse中可以列出目录,新建文件夹,上传文件了。
 
windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - IT AIR
 
windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - IT AIR
 
windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - IT AIR
 
windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - IT AIR

( 或者修改hadoop集群上文件夹的权限,如:bin/hadoop fs -chmod 777 ./in, 下图第2个文件是修改hadoop集群文件平权限后上传的)
windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - ITAIR
 
windows下Eclipse安装hadoop1.1.2插件 - ppy2790@126 - ITAIR

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值