datanode启动后闪退_Hadoop集群搭建好后无法启动datanode

搭建Hadoop集群的时候，

运行命令：

hdfs namenode -format

格式化namenode,因为某种原因我进行了两次格式化namenode，这样做的后果是接下来我在用命令：

start-dfs.sh

来启动hdfs时，jps发现datanode先是启动了一下，然后就挂掉了，在http://192.168.59.101:50070 （HDFS管理界面）也看不到datanode的信息。

下图是具体的日志信息：

综合我在网上搜到的各种回答，确定无疑这是因为我二次格式化namenode所导致的：

hadoop的升级功能需要datanode在它的版本文件里存储一个永久性的clusterID，当datanode启动时会检查并匹配namenode的版本文件里的clusterID，如果两者不匹配，就会出现"Incompatible clusterIDs"的异常。
每次格式化namenode都会生成一个新的clusterID, 如果只格式化了namenode，没有格式化此datanode， 就会出现”java.io.IOException: Incompatible namespaceIDs“异常。

所以现在的问题就是更改这个datanode的clusterID就OK：

根据日志报错信息（注意上图中红框部分）：

2019-09-14 23:06:37,591 WARN org.apache.hadoop.hdfs.server.common.Storage: java.io.IOException: 
Incompatible clusterIDs in /opt/hadoop/dfs/data: namenode clusterID = CID-b2fc3970-51f5-44e8-a092-03bad04e640e; 
datanode clusterID = CID-db031ca7-c510-4b16-a6af-af32cd5a482a

进入/opt/hadoop/dfs/data该目录下：

三个datanode节点都这样更改后，重启：即可成功启动datanode

http://192.168.59.101:50070/dfshealth.html#tab-datanode