**
Hadoop集群搭建
**
需要3台以上虚拟设备,通过克隆方式创建4个虚拟机。
1、修改克隆虚拟机IP
修改完之后重启服务, 使用ipaddr查看IP配置信息是否修改成功。
2、修改克隆虚拟机hosts
3、修改克隆虚拟机的hostname
查看一下路径是否存在data文件,有先删除。
使用命令rm -fr data/ 删除data文件
使用scp命令将BD03上已经配置好hadoop包发到BD04上。
配置免密登陆:
ssh-keygen:生产密钥
ssh-copy-id BD01每台都要执行,把密码发到每个节点上。(将本节点的密钥发送到BD01)
使用cd /root/.ssh/查看密钥是否都有发送过来。
修改配置以下文件:(每个节点都一样)
/opt/module/hadoop-2.8.4/etc/hadoop/core-site.xml
/opt/module/hadoop-2.8.4/etc/hadoop/hdfs-site.xml
/opt/module/hadoop-2.8.4/etc/hadoop/mapred-site.xml
使用:hadoop namenode -format进行格式化。
格式过程中未出现error则代表格式化成功。
在节点1进行启动服务测试:
start-dfs.sh
在节点2进行yarn服务启动
使用jps查看进程。
进入一下界面进行测试:
http://192.168.1.123:50070