本地搭建Windows版Hadoop

1.解压Hadoop安装包,winutils-master包。把winutils解压出来的对应hadoop版本的文件夹复制到Hadoop解压目录下的bin文件夹下。配置hadoop的环境变量。

2.修改hadoop目录下的etc->hadoop文件夹下的hadoop-env.cm,set JAVA_HOME=你的JDK路径。
注意:如果JDK安装在Program Files 目录下,用PROGRA~1代替。
例如:set JAVA_HOME=C:\PROGRA~1\java\jdk.1.8;

3.新建data文件夹
里面有
NameNode【涉及第四步配置 hdfs-site.xml 使用】
DataNode【涉及第四步配置hdfs-site.xml 中 使用】
tmp 【涉及第四步配置core-site.xml中使用】
dfsdir 【涉及第四步配置core-site.xml中使用】
目录。
路径随意,只要后面在配置文件中指向这个路径即可。

4.配置etc->hadoop目录下的core-site.xml(涉及第三步路径),
hdfs-site.xml(涉及第三步路径),mapred-site.xml,yarn-site.xml。
只需把第三步你创建的data目录路径配置就可以了。

5.hadoop-2.7.1\bin\yarn.cmd,用notepad++打开修改->编码格式->windows编码格式,不然启动时会报错。

6.CMD里面执行hadoop version看是否安装成功;

7.启动格式化HDFS:打开CMD,执行HDFS namenode-format,格式化后会生成一个current文件(第三步 /data/namenode/current),则格式化成功;

8.在sbin目录下的cmd执行 start-all.cmd。弹出四个窗口,若无报错信息则启动成功。

9.输入http://loclhost:50070 --HDFS可视化界面;
输入http://loclhost:8088 --是hadoop 可视化界面;

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值