hadoop 2.7.3 启动Hadoop HDFS时的“Incompatible clusterIDs”

转载 2017年01月03日 15:44:20

Incompatible clusterIDs”的错误原因是在执行“hdfs namenode -format”之前,没有清空DataNode节点的data目录。

 

网上一些文章和帖子说是tmp目录,它本身也是没问题的,但Hadoop 2.7.3是data目录.

从上述描述不难看出,解决办法就是清空所有DataNodedata目录,但注意不要将data目录本身给删除了。

data目录由hdfs-site.xml文件中的属性“dfs.datanode.data.dir”指定。

 

 INFO org.apache.hadoop.hdfs.server.common.Storage: Lock on /data/hadoop/hadoop-2.7.3/data/in_use.lock acquired by nodename 28326@localhost

Warn org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for block pool Block pool 

org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for block pool Block pool  (Datanode Uuid unassigned) service to /172.25.40.171:9001

java.io.IOException: Incompatible clusterIDs in /data/hadoop/hadoop-2.4.0/data: namenode clusterID = CID-50401d89-a33e-47bf-9d14-914d8f1c4862; datanode clusterID = CID-153d6fcb-d037-4156-b63a-10d6be224091


 (Datanode Uuid unassigned) service to /172.25.40.171:9001

java.io.IOException: Incompatible clusterIDs in /data/hadoop/hadoop-2.4.0/data: namenode clusterID = CID-50401d89-a33e-47bf-9d14-914d8f1c4862; datanode clusterID = CID-153d6fcb-d037-4156-b63a-10d6be224091


相关文章推荐

Sqoop-1.4.6安装配置及Mysql->HDFS->Hive数据导入(基于Hadoop2.7.3)

写在前面本博客基于的环境如下: OS版本: Ubuntu16.04 Hadoop版本: Hadoop-2.7.3 Hbase版本: Hbase-1.3.1 Hive版本: Hive-2.1.1...

hadoop2.7.3源码解析之hdfs删除文件全流程分析

客户端删除文件 namenode删除文件 从命名空间删除文件 将相应的数据块加到InvalidateBlocks中 ReplicationMonitor监控线程 心跳生成删除命令 datanode删除...

start-dfs datanode没启动起来,异常java.io.IOException: Incompatible clusterIDs in

[zzq@weekend110 app]$ cat /home/zzq/app/hadoop/hadoop-2.4.1/data/dfs/data/current/VERSION #Mon Oct 1...

Hadoop入门-3.HDFS的简单API(demo)(基于hadoop-2.7.3)

条件准备      下载部署         下载Hadoop-2.7.3.tar.gz包,可以去官网下载。      ...

【Hadoop】Hadoop官方文档翻译——HDFS Architecture 2.7.3

官方文档是程序员最好的学习资料,本篇是Hadoop官方文档中HDFS Architecture (2.7.3)篇的翻译,希望能帮助大家更好地学习Hadoop。

hadoop2.7.3关于hdfs配置项的变动(相比较hadoop2.6.0)

hadoop2.7.3关于hdfs配置项的变动(相比较hadoop2.6.0)调查方式:我从hadoop的官方网站下载了2.6.0 和2.7.3 版本的hdfs-default.xml$ wget h...

hadoop 2.7.3 源码分析(四):namenode启动流程

摘要通过前边的文章我们已经知道,hadoop namenode启动的类org.apache.hadoop.hdfs.server.namenode.NameNode,本节内容就顺着其启动流程,查看在n...

hadoop2.7.3启动脚本流程

  • 2017-07-27 17:17
  • 13KB
  • 下载

遇到问题---Hadoop---java.io.IOException: Incompatible namespaceIDs

现象我们前面做完了namenode format之后,用./start-all.sh 重启之后jps检查发现slave机子的datanode没有启动起来。如图:少了datanode。进入日志路径查看日...

HADOOP报错Incompatible namespaceIDs

今早一来,突然发现使用-put命令往HDFS里传数据传不上去了,抱一大堆错误,然后我使用bin/hadoop dfsadmin -report查看系统状态 admin@adw1:/home/admi...
  • Cages
  • Cages
  • 2012-05-23 15:43
  • 308
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:深度学习:神经网络中的前向传播和反向传播算法推导
举报原因:
原因补充:

(最多只允许输入30个字)