windows下连接hadoop并且编写调试mapReduce程序
1.下载你相对版本的hadoop-eclips插件,我的是1.0.0,
2.将该插件放到你的myeclips\dropins目录下
3.重启Myeclipse,选择window–>Open Perspective–>Others;选择Map/Reduce;
4.根据你的hadoop进行配置
5.这个时候应该可以读取你的HDFS了
6.新建一个Java项目
7.为你的项目引入hadoop的jar包
8.修改windows/System32/Drivers/etc/hosts,加上你namenode的机器名称和ip
否则会报如下错误:unknow host
9.修改hadoop/conf/ hdfs-site.xml ,加上如下属性:
<property>
<name>dfs.permissions</name>
<value>false</value>
</property>
否则run MapReduce的时候会报如下错误:
org.apache.hadoop.security.AccessControlException: Permission denied: user=Think, access=WRITE, inode=”output”:root:supergroup:rwxr-xr-x