超详Windows系统下eclipse远程hadoop环境搭建

一.JAVA环境配置

• JDK安装（小伙伴们上网找压缩包即可）

• JDK环境变量配置

 

• 新建一个系统变量

变量名：JAVA_HOME

变量值：根据自己JDK安装实际路径填写

• 新建一个系统变量

变量名：CLASSPATH

变量值：%JAVA_HOME%\lib\dt.jar;%JAVA_HOME%\lib\tools.jar;.

• 修改系统变量

变量名：PATH

变量值：%JAVA_HOME%bin;      （该项在前面添加 ）

验证是否成功

打开cmd命令窗口输入 java -version 结果如下图则成功

二.下载Eclipse并配置（JavaSE版本、JavaEE版本均可）

找到Eclipse安装路径，在该路径下创建HadoopWorkspace文件夹

 

启动Eclipse，将工作空间设定在刚建立的HadoopWorkspace目录

 

下载并解压下图文件,将解压后文件复制到eclipse的相应目录plugins下

   解压之后=>  

 

三.windows系统中安装Hadoop2.7.3

将Hadoop2.7.3.tar.gz解压(这里需要解压缩两次)到指定位置：D:\hadoop-2.7.3

 经过1次解压缩=>

再次解压=>

配置环境变量:

新建系统变量

变量名：HADOOP_HOME

值为：D:\hadoop-2.7.3

 

修改系统变量

变量名：PATH

变量值：%HADOOP_HOME%bin;      （该项在前面添加 ）

 

修改D:\hadoop-2.7.3\etc\hadoop\hadoop-env.cmd

修改set JAVA_HOME=C:\Progra~1\Java\jdk1.8.0_144    

注意1：写自己安装的jdk目录

注意2：和作者路径一样的小伙伴 Program Files  由于有空格命令无法执行所以要改成Progra~1

验证hadoop是否安装好

在命令行提示符下输入：hadoop version

重启eclipse后在windows==>preference==>Hadoop Map/Reduce设置hadoop的安装目录

注：安装目录根据自己hadoop实际路径写，作者为D:\hadoop-2.7.3

 

四.下载安装windows系统编译好的Hadoop2.7.1

• 解压hadoop-2.7.1.tar 到D:\hadoop-2.7.1

• 打开hadoop-2.7.1

    1.将文件winutil.exe复制到D:\hadoop-2.7.3\bin  注:这里复制到自己hadoop-2.7.3bin目录下
    2.将文件hadoop.dll复制到c:\windows\system32

 五.Eclipse内部配置

• 重启Eclipse 添加并打开Map/Reduce视图

        windows==>Show View==>选择Map/Reduce Locations

 

• 点击图中箭头位置，填写弹出新建Hadoop连接窗口

 

•  填写相应的配置项内容

    location name：Hadoop     //自定义一个名字
    Map/Reduce master        //yarn_site.xml
        Host:192.168.118.129  //填自己虚拟机master的IP
         Port:18040  //固定
     DFS Master        //core_site.xml
        Host:192.168.118.129   //填自己虚拟机master的IP
         Port:9000     //固定

 

• 到这里我们的所有配置就完成了，我们可以在Eclipse看到虚拟机里HDFS文件系统的文件情况