Win10环境搭建Hadoop2.x环境

1.下载hadoop2.7.1和hadooponwindows-master.zip

1.1 hadoop官网资源：

Index of /dist/hadoop/commonhttps://archive.apache.org/dist/hadoop/common/

1.2 hadooponwindows-master.zip

链接：https://pan.baidu.com/s/1t8NHXbbJ3NJAdw5k7fGOtA 
提取码：5678

 下载解压，我放在了E盘

2.原版Hadoop不支持Windows系统，需要修改一些配置方便在Windows上运行，hadooponwindows-master.zip 解压后
复制解压开的bin文件和etc文件到hadoop-2.7.1文件中，并替换原有的bin和etc文件

3.下载配置JAVA_HOME，并检查是否成功

 4.配置Hadoop环境变量

path添加：%HADOOP_HOME%\bin

新增HADOOP_HOME，指向目录

 CMD输入set查看环境配置是否成功

 CMD输入hadoop version检查hadoop是否安装成功

 5.使用编辑器打开E:\hadoop\hadoop-2.7.1\hadoop-2.7.1\etc\hadoop\hadoop-env.cmd
修改JAVA_HOME的路径

 6.在E:\hadoop\hadoop-2.7.1\hadoop-2.7.1目录下 添加tmp文件夹

 7.在E:\hadoop\hadoop-2.7.1\hadoop-2.7.1添加data和namenode，datanode子文件夹

8..打开 E:\hadoop\hadoop-2.7.1\hadoop-2.7.1\etc\hadoop\hdfs-site.xml
修改路径为hadoop下的namenode和datanode

 

 

9.从E:\hadoop\hadoop-2.7.1\hadoop-2.7.1\bin下拷贝hadoop.dll到 C:\Windows\System32 ，不然在window平台使用MapReduce测试时报错 

 

10.以管理员身份打开命令提示符
输入hdfs namenode -format,看到如下所示就说明format成功

运行后会让你输入Y/N，此时输入大写Y，回车即可

11.指向hadoop-2.7.1\sbin文件下

输入start-all，启动hadoop集群

E:\hadoop\hadoop-2.7.1\hadoop-2.7.1\sbin>start-all

出现这4个窗口就代表成功了

输入jps查看运行的节点

 

12.访问http://localhost:50070,访问hadoop的web界面

访问http://localhost:8088,访问yarn的web界面，有就表明已经成功

web: http://localhost:50070

yarn: http://localhost:8088

输入stop-all结束所有节点