Eclipse开发MR环境搭建

1.jdk环境配置 
   jdk安装后好后配置相关JAVA_HOME环境变量,并将bin目录配置到path 

2. 下载hadoop-2.7.1.tar.gz

解压hadoop-2.7.1.tar.gz到 D:\XXXX\workspace\hadoop-2.7.1

下载地址：http://archive.apache.org/dist/hadoop/common/hadoop-2.7.1/  

3. 下载hadoop2x-eclipse-plugin 
  百度下载hadoop2x-eclipse-plugin开发插件，如果下载的不好用，可以自己编译一个自己目前在用hadoop版本的插件。

自行编译插件可以参考地址：

http://www.cnblogs.com/beststrive/p/8275932.html

4.下载hadoop-common-2.7.1.bin.zip

解压hadoop-common-2.7.1.bin.zip并将hadoop.dll和winutils.exe文件分别放到D:\XXXX\workspace\hadoop-2.7.1\bin 

和C:\Windows\System32目录下

5.拷贝插件到eclipse插件目录下

hadoop-eclipse-plugin-2.6.0.jar拷贝至eclipse的plugins目录下，然后重启eclipse 

6.设置Hadoop目录

打开菜单Window--Preference--Hadoop Map/Reduce进行配置hadoop目录，如下图所示：

7.配置hadoop视图

显示Hadoop连接配置窗口：Window--Show View--Other-MapReduce Tools,如下图所示： 

8.配置连接Hadoop

查看是否连接成功，能看到如下信息，这种表示连接失败（因为刚把集群关掉），如果连接成功，会显示目录信息。 

9.配置hadoop环境变量

添加环境变量HADOOP_HOME=D:\XXX\workspace\hadoop-2.7.1
追加环境变量path内容：%HADOOP_HOME%/bin

 

转载于:https://www.cnblogs.com/beststrive/p/8276117.html