windows7下eclipse连接ubuntu中的hadoop开发环境配置

工具下载


搭建过程

  • 解压eclipse
    解压到路径D:\IDE\eclipseHadoop

  • 安装ant

1.在win7中解压,配置环境变量ANT_HOME和path

  • 安装hadoop
    1.解压上述hadoop相关包到D:\IDE\hadoop
    hadoop环境路径

2.配置环境变量HADOOP_HOME和path

  • 编译hadoop eclipse插件
ant jar -Dversion=2.5.2 -Declipse.home=D:\IDE\eclipseHadoop -Dhadoop.home=D:\IDE\hadoop\hadoop-2.5.2

编译成功后会在D:\IDE\hadoop\hadoop2x-eclipse-plugin-master\build\contrib\eclipse-plugin下面生成hadoop-eclipse-plugin-2.5.2.jar包
编译过程如果报缺少包错误:htrace-core-3.0.4.jar下载即可
- 配置eclipse环境

1.将编译后的插件copy到D:\IDE\eclipseHadoop\plugins中,重启eclipse
2.配置hadoop路径
eclipse配置hadoop路径

3.连接ubuntu中的hadoop
(1)在windows的hosts中配置 虚拟机IP和hostname
如: 192.168.233.3 hadoop
(2)找到eclipse window》show view 找到Map/reduce Locations进行如下配置,注意host配置和虚拟机里的core-site.xml一致。
这里写图片描述
(3)配置成功,在eclipse左侧窗口可以查看虚拟机中hdfs文件系统的文件。
默认hdfs的路径为/user/hadoop
(4)这时候,可能还是连接不到虚拟机的hdfs文件系统。
需要将common bin中的hadoop.dll和winutils.exe复制到D:\IDE\hadoop\hadoop-2.5.2\bin中即可
这里写图片描述

至此,windows环境连接虚拟机ubuntu的hadoop伪分布式集群开发环境搭建完成,可以在本地自由地开发测试啦~~~


看了前辈们写的文档一步一步做的,灰常感谢分享的大牛们,自己记录下以后忘记可以翻看啊!!!!

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值