Hadoop集群无法启动datanode的解决方法

最新推荐文章于 2023-08-17 15:33:22 发布

wister136

最新推荐文章于 2023-08-17 15:33:22 发布

阅读量2.7k

点赞数

分类专栏： hadoop

本文链接：https://blog.csdn.net/u010599953/article/details/76856292

版权

在Hadoop集群重启后，datanode未能启动，日志显示文件复制失败，只复制到0个节点，而非最小复制数1。通过检查发现，存在0个活动datanode且无节点被排除。尝试了多次`hadoop namenode -format`无效。解决方案是删除core-site.xml配置的dfs.data.dir及logs文件夹并重新创建，随后再次执行hadoop namenode -format。

摘要由CSDN通过智能技术生成

之前在hadoop在一起重启之后就不能看到datanode的启动，其中logs的日志显示：

2017-07-15 10:30:09,496 INFO org.apache.hadoop.ipc.Server: IPC Server handler 2 on 9000, call org.apache.hadoop.hdfs.protocol.ClientProtocol.addBlock from 192.168.86.20:8585 Call#48 Retry#0
java.io.IOException: File /wordcount/input/aaa.txt could only be replicated to 0 nodes instead of minReplication (=1). There are 0 datanode(s) running and no node(s) are excluded in this operation.
at org.apache.hadoop.hdfs.server.blockmanagement.BlockManager.chooseTarget4NewBlock(BlockManager.java:1559)
at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getAdditionalBlock(FSNamesystem.java:3245)
at org.apache.hadoop.hdfs.server.namenode.NameNodeRpcServer.addBlock(NameNodeRpcServer.java:663)
at org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProt