使用eclipse连接hadoop

1．将插件放入eclipse/plugin/下
将编译好的eclipse hadoop插件hadoop-eclipse-plugin-2.6.0.jar
拷贝到eclipse安装目录下的plugin目录下，

重启eclipse

2．配置Hadoop安装目录
打开Window -> Preference -> Hadoop Map/Reduce，，配置右面的”Hadoop installation directory”项，指向hadoop安装目录。将hadoop安装包拷贝到当前系统的某个目录下，解压即可，如图

3．新建Map/Reduce视图
Window -> Open Perspective -> Other -> Map/Reduce，eclipse的下方会出现如下视图：

4．修改Advanced parameters标签
1．修改dfs.replication
打开上一个设置的页面，切换到Advanced parameters标签，修改如下配置项：
dfs.replication，默认是3，要根据你的Datanode的个数来定，如果你仅有2个datanode，那么就写2，如果只有一个，就写1，大于或者等于3个，写3。

2．修改hadoop.tmp.dir
这个要跟上节建立的Hadoop集群配置中core-site.xml 中的hadoop.tmp.dir设置一样

3．重启eclipse
5．配置变量环境
HADOOP_HOME 和path，如图所示：


6．将Hadoop.dll和winutil.exe放入hadoop-2.6.0\bin下
7．将Hadoop.dll和winutil.exe放入到C:\Windows\System32 目录下
8．修改NativeIO.java
下载对应hadoop源代码，hadoop-2.6.0-src.tar.gz解压，hadoop-2.6.0-src\hadoop-common- project\hadoop-common\src\main\java\org\apache\hadoop\io\nativeio下 NativeIO.java 复制到对应的Eclipse的project，然后修改557行为return true

9．重启电脑
10．配置HADOOP_USER_NAME
在代码中加入： System.setProperty(“hadoop.home.dir”,”D:\hadoop\hadoop-2.6.0”);
System.setProperty(“HADOOP_USER_NAME”, “root”);可以解决权限问题