linux如何在eclipse中运行wordcount,Eclipse执行Hadoop WordCount

前期工作

我的Eclipse是安装在Windows下的,通过Eclipse执行程序连接Hadoop,需要让虚拟机的访问地址和本机的访问地址保持在同一域内,虚拟机的地址更改前面的文章介绍过了,如果想改windows本机ip地址,打开“网络和共享中心“,点击左侧菜单”更改适配器设置“,选择相应连接网络进行IpV4属性地址修改即可。我虚拟机地址为192.168.3.137

准备工作

地址配置好之后,在Eclipse上要安装Hadoop的插件(你可以参考源码自行修改)。

打开Eclipse安装路径---\eclipse\plugins,把hadoop-eclipse-plugin-1.1.2.jar放到这个目录下。

windows本机新建目录(本人在E:\hadoopMapReduceDir),从Linux的Hadoop安装包内复制所有jar放到这个目录下备用。

配置工作

打开Eclipse,在菜单栏点击Window,showView选择Other打开选择显示的窗口,如下

8620f3236780a481869afb4b89dc6bbf.png

在MapReduceTools 目录下找到这只大象,将它拖到Eclipse底部显示(和Console放一块)

d1abe3dee0aff6d20a3d9d88aa66700d.png

点击大象,在下边空白区右击 选择New Hadooplocation(见下图)

c849beb0b372382691d71b8d7d8ec1ee.png

打开新建配置窗口,设置连接信息,下图是本机的连接配置名称自己填写,两个端口和username 按图填写(Hadoop默认的端口)

71190713fe943ff754c0840b55fedbb4.png

点击Eclipse菜单栏Window ---》Preference,找到HadoopMap/Reduce,点击之后在右侧选择导入Hadoop jar的路径,这样以后新建Hadoop项目,jar包会自动从该路径加载,路径上面已设,添加进来如图:

f00dc31e62297e15bca171d30e52de35.png

创建项目

点击File---》other,打开新建对话框,创建Map/ReduceProject项目NewHadoopTest

7883cd24acd4896c4aebd86f7f99e301.png

创建完成后你会看到jar包自动加载到项目之中

a2a3a652be2dc3755e7058566b568ac7.png

拷贝Linux下Hadoop的src目录下的example java项目 到刚刚创建的工程下src下,

6eb6a49d1668107b765f416fa5a1d36e.png里面就有WordCount.java

Linux下启动Hadoop(用JPS检查是否已启动),在Eclipse连接,连接成功后Hadoop目录就会显示如下

1c0bf0dd44eb8152daf1e821cea3fe8f.png

0b1331709591d260c1c78e86d0c51c18.png

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值