hadoop报Inconsistent checkpoint fields.

1、首先查看一下错误日志

2、看了许多博客，都说是多次格式化导致的版本不一致，有说clusterId的，又说namespaceID，有点迷，所以直接看源码吧，一个版本判断应该还是可以看懂的，通过抛异常的路径找到https://github.com/apache/hadoop/blob/1f71c4ae71427a8a7476eaef64187a5643596552/hadoop-hdfs-project/hadoop-hdfs/src/main/java/org/apache/hadoop/hdfs/server/namenode/CheckpointSignature.java#L134

源码中会比较namespaceID、clusterID、blockpoolID、layoutVersion、cTime，其中有一个不相等就GG

查了一下三台机子上data和name文件夹下对应的版本信息，真的没有对上欸

[hadoop@master current]$ cat /usr/hadoop/tmp/dfs/namesecondary/current/VERSION
#Tue Jun 30 19:52:19 CST 2020
namespaceID=1793453017
clusterID=CID-5da7d005-3b4e-4460-8696-2adf1ce418c2
cTime=1593506913578
storageType=NAME_NODE
blockpoolID=BP-1666703169-192.168.1.101-1593506913578
layoutVersion=-63
[hadoop@master current]$ cat /usr/hadoop/dfs/name/current/VERSION 
#Tue Jun 30 16:48:33 CST 2020
namespaceID=1793453017
clusterID=CID-5da7d005-3b4e-4460-8696-2adf1ce418c2
cTime=1593506913578
storageType=NAME_NODE
blockpoolID=BP-1666703169-192.168.1.101-1593506913578
layoutVersion=-63
[hadoop@master current]$ 


[hadoop@slave1 current]$ cat /usr/hadoop/dfs/data/current/VERSION
#Tue Jun 30 10:59:13 CST 2020
storageID=DS-7005282f-eab4-4f65-896e-6cb334dc398b
clusterID=CID-61ad487a-4a76-42f0-ae90-78ed2e982794
cTime=0
datanodeUuid=cf28ec9a-8325-4da2-930c-67a3a4aa2361
storageType=DATA_NODE
layoutVersion=-57

[hadoop@slave1 current]$ cat /usr/hadoop/dfs/name/current/VERSION 
#Tue Jun 30 16:48:37 CST 2020
namespaceID=711862278
clusterID=CID-20246586-9eb4-4a7f-a739-b42d665d1264
cTime=1593506917039
storageType=NAME_NODE
blockpoolID=BP-1260962861-192.168.1.102-1593506917039
layoutVersion=-63
[hadoop@slave1 current]$ 


[hadoop@slave2 sbin]$ cat /usr/hadoop/dfs/data/current/VERSION
#Tue Jun 30 11:08:31 CST 2020
storageID=DS-fca5c74d-8135-4122-a652-1e0f19583513
clusterID=CID-61ad487a-4a76-42f0-ae90-78ed2e982794
cTime=0
datanodeUuid=7e61463b-422d-4966-9da8-3ea0024c93ae
storageType=DATA_NODE
layoutVersion=-57

[hadoop@slave2 sbin]$ cat /usr/hadoop/dfs/name/current/VERSION 
#Tue Jun 30 16:48:42 CST 2020
namespaceID=1578717230
clusterID=CID-f8c18279-6dbb-4c62-8aa8-ac0de126f977
cTime=1593506922187
storageType=NAME_NODE
blockpoolID=BP-969610304-192.168.1.103-1593506922187
layoutVersion=-63
[hadoop@slave2 sbin]$ 

 

仔细回忆了一下，自己是在每台安装hadoop的机器上都格式化了一遍，然后发现别人的只在master格式化一次！！！大吃一惊

好吧，为了保证版本一致，需要把三台机器上的data和tmp文件夹内容都删除之后，重新在master上执行格式化，之后就正常了。