namenode 格式化错误 Unable to check if JNs are ready for formatting

今天在进行 bin/hadoop namenode -format 时候出现以下错误 :

org.apache.hadoop.hdfs.qjournal.client.QuorumException: Unable to check if JNs are ready for formatting. n
 
20/4/19 04:52:50 WARN namenode.NameNode: Encountered exception during format: 
org.apache.hadoop.hdfs.qjournal.client.QuorumException: Unable to check if JNs are ready for formatting. 3 exceptions thrown:
10.165.114.138:8485: Call From hd1/10.172.153.46 to hd3:8485 failed on connection exception: java.net.ConnectException: Connection refused; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused
10.172.218.18:8485: Call From hd1/10.172.153.46 to hd2:8485 failed on connection exception: java.net.ConnectException: Connection refused; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused
10.172.153.46:8485: Call From hd1/10.172.153.46 to hd1:8485 failed on connection exception: java.net.ConnectException: Connection refused; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused
        at org.apache.hadoop.hdfs.qjournal.client.QuorumException.create(QuorumException.java:81)
        at org.apache.hadoop.hdfs.qjournal.client.QuorumCall.rethrowException(QuorumCall.java:223)
        at org.apache.hadoop.hdfs.qjournal.client.QuorumJournalManager.hasSomeData(QuorumJournalManager.java:232)
        at org.apache.hadoop.hdfs.server.common.Storage.confirmFormat(Storage.java:884)
        at org.apache.hadoop.hdfs.server.namenode.FSImage.confirmFormat(FSImage.java:171)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.format(NameNode.java:937)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1379)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1504)
20/4/19 04:52:50 FATAL namenode.NameNode: Failed to start namenode.
org.apache.hadoop.hdfs.qjournal.client.QuorumException: Unable to check if JNs are ready for formatting. 3 exceptions thrown:
10.165.114.138:8485: Call From hd1/10.172.153.46 to hd3:8485 failed on connection exception: java.net.ConnectException: Connection refused; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused
10.172.218.18:8485: Call From hd1/10.172.153.46 to hd2:8485 failed on connection exception: java.net.ConnectException: Connection refused; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused
10.172.153.46:8485: Call From hd1/10.172.153.46 to hd1:8485 failed on connection exception: java.net.ConnectException: Connection refused; For more details see:  http://wiki.apache.org/hadoop/ConnectionRefused
        at org.apache.hadoop.hdfs.qjournal.client.QuorumException.create(QuorumException.java:81)
        at org.apache.hadoop.hdfs.qjournal.client.QuorumCall.rethrowException(QuorumCall.java:223)
        at org.apache.hadoop.hdfs.qjournal.client.QuorumJournalManager.hasSomeData(QuorumJournalManager.java:232)
        at org.apache.hadoop.hdfs.server.common.Storage.confirmFormat(Storage.java:884)
        at org.apache.hadoop.hdfs.server.namenode.FSImage.confirmFormat(FSImage.java:171)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.format(NameNode.java:937)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1379)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1504)
20/4/19 04:52:50 INFO util.ExitUtil: Exiting with status 1
20/4/19 04:52:50 INFO namenode.NameNode: SHUTDOWN_MSG: 
/************************************************************
SHUTDOWN_MSG: Shutting down NameNode at hd1/10.172.153.46
************************************************************/

有两种方式可以解决:
(1)在各JournalNode节点上,输入以下命令启动journalnode服务:
sbin/hadoop-daemon.sh start journalnode:
然后格式化就没问题了

(2)HA模式第一次或删除格式化版本后格式化失败,报如上错误:
则先启动 ./start-dfs.sh
再进行 格式化,则成功

  • 4
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
NameNode 格式化是指创建一个空的文件系统命名空间,并在 NameNode 的内存中创建必要的数据结构来跟踪文件系统中所有的文件和目录。当你第一次启动 Hadoop 集群时,需要进行 NameNode 格式化NameNode 格式化的过程实际上就是在 NameNode 上创建文件系统镜像和编辑日志。文件系统镜像是指整个文件系统的目录结构和文件信息的一个快照,而编辑日志则记录了对文件系统进行的每个修改操作,包括创建、删除和重命名文件等操作。 具体来说,NameNode 格式化的过程大致如下: 1. 创建文件系统镜像:在格式化时,NameNode 会在磁盘上创建一个空的文件系统镜像,其中包含了根目录和一些必要的系统目录。这些信息被写入到 fsimage 文件中。 2. 创建编辑日志:接着,NameNode 会为文件系统创建一个空的编辑日志文件,用于记录所有的修改操作。这个文件通常称为 edits 文件。 3. 初始化命名空间:在格式化完成后,NameNode 会将文件系统镜像加载到内存中,并使用这些信息初始化命名空间。这个过程包括创建内存数据结构来跟踪所有的文件和目录,以及为每个文件和目录分配一个唯一的编号。 4. 启动服务:最后,NameNode 会启动服务并等待客户端的请求。 需要注意的是,进行 NameNode 格式化会删除 Hadoop 中所有的数据,因此需要谨慎操作。如果你不小心格式化NameNode,那么所有 Hadoop 集群中的数据都将被删除,而无法恢复。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值