start-dfs.sh后，jps看到datenode没有启动

最新推荐文章于 2023-03-22 09:19:07 发布
最新推荐文章于 2023-03-22 09:19:07 发布
阅读量1.3k 收藏 2
点赞数
分类专栏： hadoop2.5.1 文章标签： hadoop2.5.1 datanode start failed
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lifeneedyou/article/details/84687647
版权

    搭建的是一个伪集群，start-dfs.sh后，jps看到datenode没有启动，进入logs目录，查看日志

 

     java.io.IOException: Incompatible clusterIDs in /usr/local/hadoop/hdfs/data: namenode clusterID = CID-af6f15aa-efdd-479b-bf55-77270058e4f7; datanode clusterID = CID-736d1968-8fd1-4bc4-afef-5c72354c39ce

 

     namenode 和datanode 的clusterID不一致，进入对应的DataNode的目录路，把currentimian的VERSION文件中clusterID修改为和DataNode目录下面的Current/VERSION一致，然后重新启动即可。

 

    执行多次namenode -format后（中间伴随着启动）会出现这样的问题

 

 

 

lifeneedyou
关注
专栏目录
jps不出现datanode_从节点JPS没有dataNode的解决办法
weixin_39612228的博客
12-19 3563
从节点JPS没有dataNode的解决办法查看logs日志文件，找到Hadoop的安装目录下logs目录，用cat hadoop-root-datanode-localhost.localdomain.log进行日志查看1、java.net.BindException: 无法指定被请求的地址另一种错误表现方式是：执行hadoop fs -put命令报错could only be replicate...
执行start-dfs.sh后，datenode没有启动
姬世霆的专栏
01-29 581
一、执行start-dfs.sh后，datenode没有启动 　　查看日志如下：　　 2014-06-18 20:34:59,622 FATAL org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for block pool Block pool (Datanode Uuid unassign
jps没有datanode
weixin_44723678的博客
12-14 4613
启动start-all.sh后jps发现没有datanode进程。 查看日志 2018-02-27 13:54:29,161 WARN org.apache.hadoop.hdfs.server.common.Storage: java.io.IOException: Incompatible clusterIDs in /home/hadoop/app/tmp/dfs/data: namenode clusterID = CID-d92efb85-6a10-4a65-abe8-451f89eb845c;
Datenode无法启动
weixin_34220179的博客
09-21 298
执行start-dfs.sh后，或者执行datenode没有启动。很大一部分原因是因为在第一次格式化dfs后，启动并使用了hadoop，后来又重新执行了格式化命令 这时主节点namenode的clusterID会重新生成，而从节点datanode的clusterID 保持不变导致的。 解决方法： 1.查看路径： 配置hadoop-2.6.4的各项文件(注意：路径...
start-dfs.sh启动成功但jps却看不到进程
m0_56038194的博客
08-18 687
如果配置没问题，以前hdfs --daemon start namenode/datanode等能启动，但后面jps却看不到进程，极有可能是权限问题，先检查hadoop安装目录等文件夹权限看看，再检查data等目录。
jps查看发现没有datanode进程
秋叶原的黑猫的博客
08-06 715
出现此问题表示在 hdfs/data 目录下的namenode 的 clusterID 和 datanode 下的 id 不一致造成的 造成此问题的原因可能是此前多次格式化造成的： hadoop namenode -format 问题解决方案: 1.删除 hadoop 临时目录下的所有文件重新格式化 namenode (不推荐此操作,由于 hdfs 中可能存在有原来的数据,如果执行此操作,会删除所有数据) 2.将 hadoop 临时目录下的 data 和 name 目录下的 current 文件夹下的 V
问题:sbin/start-dfs.sh 启动不了zookeeper,zkfc和datenode
N8062288的博客
09-23 3557
问题一:zookeeper服务启动成功，但是就不显示端口号，未运行，配置也正确，就是不知道什么原因 运行zookeeperd后显示启动成功： JMX enabled by default Using config: /data/programfiles/zookeeper-3.4.5/bin/../conf/zoo.cfg Starting zookeeper ... STARTED 但用zk...
Hadoop集群启动，指令start-all.sh 但slave节点没有datanode
PJ填坑手记
05-30 4237
场景 在对集群进行启动时，使用指令start-all 但是slave节点上的datanode没有启动。 Expect Result： 在HadoopMaster终端上执行JPS指令，显示四个进程： 在HadoopSlave终端上执行JPS指令，显示三个进程： 而现在启动后，发现在HadoopSlave终端上只有2个进程： 原因 原因如网上所说，是因为进行了多次格式化指令： hdfs namenode -format 每次格式化都会重新你创建一个namenodeId，而在默认情况下tmp/dfs/dat
hadoop集群参数修改--以及start-all.sh无法启动resourcemanager的问题
自由幻想的博客
12-04 904
hadoop集群参数修改： 1.hadoop-env.sh 修改jdk的路径 2.core-site.xml <!-- hdfs的文件系统指定 --> <property> <name>fs.defaultFS</name> <value>hdfs://centos1:9000</...
vi /etc/profile export HADOOP_HOME=/opt/programs/hadoop-2.7.6 export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin source /etc/profile hdfs namenode -format start-dfs.sh start-yarn.sh jps
最新发布
06-11
start-dfs.sh start-yarn.sh 您可以通过 jps 命令来查看 Hadoop 相关进程是否启动成功： jps 如果成功启动，您应该能够看到 NameNode、DataNode、SecondaryNameNode、ResourceManager 和 NodeManager 等进程。
配置Hadoop实验环境 运行jps后未显示datanode或者namenode
dddfuc的博客
10-08 4222
配置Hadoop实验环境 运行jps后未显示datanode或者namenode 1.运行jps后未显示datenode 未显示datanode的原因一般都是多次格式化HDFS的原因：即多次执行 hdfs namenode -format 的结果。多次格式化会使得name和date下的clusterID不一样。因为每次格式化后name下的clusterID都会被改变，但是data下的clusterID只会在第一次格式化的时候生成，再次格式化的时候其值不会改变。 解决方法：先检查以下两个clusterID是否
start-dfs.sh后jps无DataNode
ASN_forever的博客
09-06 1199
看datanode日志，可以看到下面这句报错原因： java.io.IOException: Incompatible clusterIDs in /root/hadoop/dfs/data: namenode clusterID = CID-822d4bda-222d-48ef-b3e7-82fb9f7ef163; datanode clusterID = CID-9f6937a2-5a7...
DateNode没有启动解决办法
ddxshf的博客
07-09 4137
查看日志如下： 2017-07-09 08:45:52,209 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: registered UNIX signal handlers for [TERM, HUP, INT] 2017-07-09 08:45:52,577 WARN org.apache.hadoop.util.Nativ
start-dfs.sh后jps无法查看到namenode进程
啊水水水的博客
03-18 2375
（1）将namenode再重新格式化一下： hadoop namenode -format （2）接着启动hadoop： start-all.sh （3）最后用jps查看相关进程
hadoop启动_hadoop：伪分布模式启动步骤分解！
weixin_39793708的博客
11-22 318
1、格式化HDFS在运行伪分布式前，需先对NameNode进行格式化，在命令行中输入hdfs namenode -format # 格式化hdfs若出现successfully formatted字样，则说明格式化成功2、启动hadoop然后启动hadoop集群start-all.sh # 一次性启动所有服务或使用以下命令单独启动各项服务start-dfs.sh #启动...
Hadoop start-dfs.sh启动后jps没显示进程，已解决！！！
热门推荐
NIE_WIN的博客
10-13 1万+
困扰我很多天的start-dfs.sh启动但jps进程不显示问题已经解决！！！快来看看吧！
Hadoop集群启动后命令JPS没有DataNode或者NameNode
qq_53953480的博客
03-22 8023
a:进入/opt/module/hadoop-3.1.3/data/dfs目录里面删除掉所有文件。c:进入/opt/module/hadoop-3.1.3/logs目录里面删除掉所有文件。1）需要检查core-site.xml 和 hdfs-site.xml这俩文件，配置没错的话再看第二条。2）可能已经执行格式化NameNode后，但是格式之前并没有停止之前的进程并删除相关数据。1）删除dfs文件夹里的文件和删除nm-local-dir目录。2）删除后需要重新执行格式化NameNode操作。
zookeeper 启动显示started，jps查看进程却没有，DFSZKFailoverController启动显示，jps查看进程却没有的解决方法
Better0417的博客
09-01 1万+
有时候Hbase错误关闭，会出现以下问题，主要是Hbase关闭错误，导致zookeeper出错！！！ 如图所示： 输入：zkServer.sh start 显示启动成功，输入jps却找不到zookeeper进程 解决方法：去zkdata文件下查看myid文件 cd /opt/bigdata/hadoop/zookeeper/zkdata vi myid 如图： 查看是否为你原来设置数字，主机1开始，改回原来配置。 再启动zookeeper，发现启动成功 相应的其他myid改为2,3,4问题就解决了 DF
start-dfs.sh无法启动namenode(jps查看不到namenode)
u012504875的博客
07-06 1万+
1.当启动hadoop后，一般会通过jps命令查看hadoop的启动情况，本人hadoop菜鸟一枚，在启动后一直看不到namenode的启动。   2.一般发生这种情况，我觉得有必要在hadoop文件夹下的logs文件夹里查看日志： 3.一般会查看.log文件，查看后如果发现tmp文件夹里找不到namenode，说明启动hadoop时没有产生name文件。 4.
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值