环境配置 1 master ; 2 slave
记得关闭防火墙!
1. 遇到的问题
hadoop 多次格式化format namenode 导致节点不能启动,出现这个问题的原因是多次格式化会导致节点的clusterID不一致
2. 解决方法
1. 先停止所有启动的服务
/usr/local/hadoop/sbin/stop-all.sh
2. 删除core-site.xml 和hdfs-site.xml文件中配置的文件夹,注意:这一步在三台机器上都要做
这边指定在data/目录下。直接cd 到 data目录 执行 rm -rf ./*
3. 重新格式化
hadoop namenode -format(可能存在问题,解决方法看tip)
4. 启动服务
使用 ./start-all.sh || ./start-dfs.sh 两个命令启动服务,再使用jps查看是不是namnode 和datanode都已经启动,再尝试打开50070端口网站看看是不是三个节点都有了
Tip:在格式化之前,需要先启动 先用./zkServer.sh start 启动各个zookeeper,再用./ hadoop-daemon.sh start journalnode启动各个NodeName上的 JournalNode进程。然后再进行格式化即可。