datanode 无法启动

最新推荐文章于 2023-02-26 21:04:46 发布
最新推荐文章于 2023-02-26 21:04:46 发布
阅读量1.3k 收藏 1
点赞数
文章标签： 2010
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xln0130/article/details/5737652
版权

因为重新格式化了namenode，会重新分配一个namenode-id，而datanode上面还是之前旧的namenode-id，导致不一致所以启动不了。

 

通过查看datanode上面的log日志，发现namespaceID 不一致

2010-07-16 00:48:38,432 ERROR org.apache.hadoop.dfs.DataNode: java.io.IOException: Incompatible namespaceIDs in /home/xuluni/hadoop-0.18.3/filesystem/data: namenode namespaceID = 116450770; datanode namespaceID = 1675970252

 

具体可以查看filesystem/data/current/VERSION文件，里面有namespaceID ，删除每个datanode上面的这个文件即可；

 

然后再格式化了namenode，重新启动。ok了

xln0130
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
datanode无法启动
Q48711的博客
07-31 452
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Mar
无法启动hive
01-07
安全模式主要是为了系统启动的时候检查各个DataNode上数据块的有效性，同时根据策略必要的复制或者删除部分数据块。运行期通过命令也可以进入安全模式。在实践过程中，系统启动的时候去修改和删除文件也会有安全模式...
Datanode无法启动
weixin_44704605的博客
11-18 395
1）现象： #jps 看不到DataNode （2）可能原因： datanode的clusterID 和 namenode的clusterID 不匹配。 （3）解决办法： 找到data和name配置的dir路径，找到hdfs-site.xml文件（cd hadoop-2.6.5/etc/hadoop/） <?xml version="1.0"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <!-- P
dataNode无法启动
weixin_33754065的博客
04-09 156
1. clusterID不一致，namenode的cid和datanode的cid不一致，导致的原因是对namenode进行format的之后，datanode不会进行format，所以datanode里面的cid还是和format之前namenode的cid一样，解决办法是删除datanode里面的dfs.datanode.data.dir目录和tmp目录，然后再启动sta...
DataNode无法启动
zhuyao3582的博客
06-29 238
##关于hadoop集群中第二次启动时，DataNode没有启动的解决办法 ##第一次启动时没有问题 第二次启动时会有文件残留 产生一个新的namenode文件（id），就不认识以前的namenode了 导致集群不能正常启动 解决办法：在格式化之前，删除datanode里面的信息（默认在/tmp，如果配置该目录，就要去配置的目录下删除（hadoop-2.6.5/data/tmp/）） ##rm -rf /tmp (从节点都要执行) ##hdfs namenode -format (主节点执行) ##
Hadoop datanode重新加载失败无法启动解决.docx
09-26
Hadoop datanode重新加载失败无法启动解决 本文将详细讲解Hadoop datanode重新加载失败无法启动解决的知识点，主要包括datanode加载失败的原因、解决方法和步骤。 知识点1: datanode加载失败的原因 datanode加载...
hadoop client与datanode的通信协议分析
09-05
同时，它还会启动一个ResponseProcessor线程，用于接收DataNode返回的确认信息（ACK）并处理可能出现的错误。这一过程不断循环，直到所有数据包发送完毕。 在写Block的过程中，客户端与DataNode之间的通信主要包括...
Hadoop datanode启动失败：Hadoop安装目录权限的问题
07-29
### Hadoop Datanode启动失败：Hadoop安装目录权限问题详解 #### 一、问题背景与现象 在部署Hadoop集群的过程中，用户可能会遇到Datanode启动失败的情况。这一问题通常表现为，在尝试启动Hadoop集群时，Datanode...
hadoop 源码解析-DataNode
06-06
DataNode 的启动过程由 `secureMain` 方法实现，该方法首先解析命令行参数，然后创建 DataNode 实例并启动它。在 `secureMain` 方法中，会检查是否提供了帮助信息，如果提供了则直接退出程序，否则继续执行 DataNode...
datanode 不能启动
悦上心灵的博客
02-05 3123
问题描述： 当我们多次格式化文件系统（hadoop namenode -format）时，会出现DataNode无法启动。 多次启动中发现有NameNode节点，并没有DataNode节点 出现该问题的原因：在第一次格式化dfs后，启动并使用了hadoop，后来又重新执行了格式化命令（hdfs namenode -format)，这时namenode的clusterID会重新生成，而datanode的clusterID 保持不变。 解决办法: 根据日志中的路径，cd /home/hadoop/tmp/dfs
DataNode无法启动问题
vamosCheng的专栏
09-10 764
今天启动集群，发现部分节点出现在
DataNode无法启动的原因
最新发布
ooblack的博客
02-26 436
datanode无法启动
Hadoop datanode 无法启动
zzbxyz
04-02 365
今天在启动Hadoop集群的时候，datanode结点一直起不来。原因是因为VERSION不一致。解决方法：删除hdfs-site.xml中设置的dfs.namenode.name.dir和dfs.datanode.dadta.dir节点指定的目录下的文件夹，然后重新format namenode和启动hadoop就可以了。原因：/datanode不被namenode识别的问题 namenode在...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值