hadoop 2.7.3 启动Hadoop HDFS时的“Incompatible clusterIDs”

转载 2017年01月03日 15:44:20

Incompatible clusterIDs”的错误原因是在执行“hdfs namenode -format”之前,没有清空DataNode节点的data目录。

 

网上一些文章和帖子说是tmp目录,它本身也是没问题的,但Hadoop 2.7.3是data目录.

从上述描述不难看出,解决办法就是清空所有DataNodedata目录,但注意不要将data目录本身给删除了。

data目录由hdfs-site.xml文件中的属性“dfs.datanode.data.dir”指定。

 

 INFO org.apache.hadoop.hdfs.server.common.Storage: Lock on /data/hadoop/hadoop-2.7.3/data/in_use.lock acquired by nodename 28326@localhost

Warn org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for block pool Block pool 

org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for block pool Block pool  (Datanode Uuid unassigned) service to /172.25.40.171:9001

java.io.IOException: Incompatible clusterIDs in /data/hadoop/hadoop-2.4.0/data: namenode clusterID = CID-50401d89-a33e-47bf-9d14-914d8f1c4862; datanode clusterID = CID-153d6fcb-d037-4156-b63a-10d6be224091


 (Datanode Uuid unassigned) service to /172.25.40.171:9001

java.io.IOException: Incompatible clusterIDs in /data/hadoop/hadoop-2.4.0/data: namenode clusterID = CID-50401d89-a33e-47bf-9d14-914d8f1c4862; datanode clusterID = CID-153d6fcb-d037-4156-b63a-10d6be224091


hadoop学习之hadoop2.8.0完全分布式集群安装

转载自:http://blog.csdn.net/peace1213/article/details/51334508 本文主要讲解Hadoop完全分布式的搭建,使用vm建立三个相同配置的...
  • Happy_wu
  • Happy_wu
  • 2017年04月19日 14:28
  • 10540

Hadoop2.8HA安装部署

Hadoop 2.8 HA集群安装部署环境:``` 系统:CentOS7 Hadoop版本:2.8(支持snappy压缩) ip: 192.170.18.205 namenode01 ...

spark在windows上local模式下的缺失winutils.exe异常

在window10上Intellij IDEA上已Local的模式运行调试Spark程序,并且将中间结果写入本地目录时,程序抛出异常错误 Using Spark's default log4j pro...

关于hadoop配置hosts文件的问题

在之前的一篇blog里,写到我的python脚本无法正常运行,后来是修改了hosts文件,今天有个同事又重新讲解了下问题,发现之前的理解有误差。 这里在介绍一下另外一种方式,就是在每台机器的host...

start-dfs datanode没启动起来,异常java.io.IOException: Incompatible clusterIDs in

[zzq@weekend110 app]$ cat /home/zzq/app/hadoop/hadoop-2.4.1/data/dfs/data/current/VERSION #Mon Oct 1...

hadoop2.7.3源码解析之hdfs删除文件全流程分析

客户端删除文件 namenode删除文件 从命名空间删除文件 将相应的数据块加到InvalidateBlocks中 ReplicationMonitor监控线程 心跳生成删除命令 datanode删除...

Sqoop-1.4.6安装配置及Mysql->HDFS->Hive数据导入(基于Hadoop2.7.3)

写在前面本博客基于的环境如下: OS版本: Ubuntu16.04 Hadoop版本: Hadoop-2.7.3 Hbase版本: Hbase-1.3.1 Hive版本: Hive-2.1.1...

Hadoop入门-3.HDFS的简单API(demo)(基于hadoop-2.7.3)

条件准备      下载部署         下载Hadoop-2.7.3.tar.gz包,可以去官网下载。         然后部署在Linux上,可以参考点击打开链接      win下eclip...

【Hadoop】Hadoop官方文档翻译——HDFS Architecture 2.7.3

官方文档是程序员最好的学习资料,本篇是Hadoop官方文档中HDFS Architecture (2.7.3)篇的翻译,希望能帮助大家更好地学习Hadoop。...

hadoop2.7.3关于hdfs配置项的变动(相比较hadoop2.6.0)

hadoop2.7.3关于hdfs配置项的变动(相比较hadoop2.6.0)调查方式:我从hadoop的官方网站下载了2.6.0 和2.7.3 版本的hdfs-default.xml$ wget h...
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:hadoop 2.7.3 启动Hadoop HDFS时的“Incompatible clusterIDs”
举报原因:
原因补充:

(最多只允许输入30个字)