在eclipse上搭建mapreduce开发环境及运行wordcount

本文介绍了如何在Windows上的Eclipse Neon.2环境下搭建Hadoop MapReduce开发环境,包括安装hadoop-eclipse-plugin jar,配置DFS locations,设置winutils.exe环境变量,解决权限问题,创建MapReduce项目并运行WordCount示例。
摘要由CSDN通过智能技术生成

1.先说明我的实验环境:

win7,

eclipse版本是Neon.2 Release (4.6.2),

hadoop2.7.3部署在1master,3slave的集群上

2.需要下载winutils.exe和hadoop-eclipse-plugin-2.7.3.jar,下载地址是点击打开链接

3.找到eclipse根目录下的plugins目录,将下载好的hadoop-eclipse-plugin-2.7.3.jar放入该目录下,重启eclipse,打开window-->preferences,发现已经生效。点击window-->show view-->other mapreduce tools-->map/reduce locations增加新的DFS locations。填写原则如下:map/reduce master填写mapreduce-site.xml的mapreduce.

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值