Hadoop集群启动没有Datanode

已于 2023-04-11 16:45:15 修改
阅读量8.9k 收藏 108
点赞数 15
文章标签： hadoop hdfs
于 2022-01-12 11:15:22 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/NullNullAgo/article/details/122448586
版权

本人搭建的伪分布式集群，Hadoop集群启动没有Datanode,一开始以为是配置问题，检查了发现没什么问题，后来发现是Datanode与Namenode之间的ClusterID不一致导致的。

可能造成的原因：频繁的格式化namenode

环境：VMWARE+Centos7+Hadoop3.1.1

解决：进入到你hadoop安装目录里面的/data/dfs文件夹中

cd /opt/module/hadoop-3.1.1/data/dfs/

这个有三个文件夹，分别是namenode，datanode和2NN的文件夹

先进入cd cd name/current/ 文件夹，然后cat VERSION(注意这里VERSION要大写)

cd name/current/

cat VERSION

 然后复制这里的ClusterID

 

 然后回到/dfs文件夹，进入到data/current，然后cat VERSION

cd data/current/

cat VERSION

同理，复制DataNode的ClusterID

最低0.47元/天 解锁文章
程序员在线炒粉
关注
当hadoop集群安装完毕后，发现没有DataNode进程
m0_65346688的博客
09-20 2775
那么，为什么会出现这个问题呐？在这个目录下输入ls，然后进入到data，再输入ls，进入到data，输入ls，进入到dfs中（有的进入data中后，是tmp，那就输入ls，进入到dfs中），输入ls，进入到data，输入ls，进入到current中，输入ls，发现了VISION,然后就可以vi VERSION了。查看这两个的clusterID是否一致，如果不一致，那我们就讲他们改为一样的就好了，修改后，保存退出（因为我的已经改好过了，所以一致），再重新启动一下集群，输入jps，发现就有DataNode。
启动hadoop集群没有datanode节点
qq_58538016的博客
04-05 1万+
使用start-dfs.sh启动hdfs后只有namenode，没有datanode。 原因：配置集群式进行了多次格式化，导致两者的id不一致，所以启动namenode是没有启动datanode。 解决办法：可以在VMware李自己找，但在xftp里面寻找更为简便。 1：找到你的hadoop下data/tmp/dfs，里面有name和data两个文件。 2：进入name，在current里有一个version的文件，记事本打开，复制id， 3：再进入到data下的current的ve.
解决Hadoop启动时，没有启动datanode
热门推荐
Islotus
10-26 4万+
原文链接: http://www.nekomiao.me/2016/08/10/hadoop-without-datanode/ Hadoop在多次运行下列指令： hadoop namenode -formatsbin/start-dfs.sh 经常会出现没有启动datanode的情况。 运行命令: jps
Hadoop集群启动时没有Datanode
evangelion_Asuka的博客
10-12 2669
在启动集群后，使用jsp命令验证集群是否配置成功时，发现Datanode没有被启动，第一反应是关闭后使用。回到dfs文件夹，进入到data文件夹中的current文件夹，使用cat查看VERSION文件。我们应将DataNode的clusterID改成NameNode的clusterID。start-all.sh命令再次启动，依旧没有，于是检查配置文件依旧没发现问题。先进入name文件夹，然后使用cat查看VERSION文件。将这里面的也复制下来与name文件夹中的对比。将两个ID进行对比发现确实不一样。
Hadoop集群启动从节点没有DataNode
m0_61232019的博客
03-03 7541
之前启动hadoop集群的时候都没有问题，今天启动hadoop集群的时候，从节点的DataNode没有启动起来。
启动Hadoop集群时没有启动datenode怎么解决？
G55331337547的博客
11-09 3371
我在用hadoop namenode -format 将主节点的NameNode进行格式化，并且用start-all.sh 启动集群后，发现datanode节点并没有启动，导致我在进行文件操作时报错。
hadoop集群启动唯独缺少DataNode进程的解决方法
最新发布
2202_75961842的博客
05-13 985
我们可以找到datanode的资料，VERSION文件，然后把所有用到datanode进程的节点上面的VERSION都删除，再在主机上重新进行格式化，再次使用。因为各种原因导致需要快照或重新配置，进入到最后一步格式化过后，开启集群发现主机进程一切正常，从节点其他进程也都有，唯独Datanode进程没有的情况。，datanode进程就可以出来了。可能是因为两次甚至多次的。然后重启Hadoop。
hadoop集群启动没有datanode
05-13
如果你的Hadoop集群启动时没有DataNode，则可能有以下几个原因： 1. DataNode守护进程没有启动 - 请检查DataNode守护进程是否已启动。可以通过在DataNode主机上运行以下命令来检查DataNode守护进程是否正在运行： ...
虚拟机hadoop集群启动时DataNode进程缺失
Magicalapologize的博客
12-28 2807
虚拟机hadoop集群启动时DataNode进程缺失 1.出现问题: 在Linux命令窗口中输入Jps查询hadoop启动项目时缺少DataNode进程; 2.问题原因:使用格式化命令之后又再次进行格式化,导致namenodeDatas文件序列号不一致使之启动失败 3.解决方案: 修改namenodeDatas文件序列号,使其保持一致 3.1DataNode启动成功效果图 云 帆 于 201...
Hadoop集群启动后没有Datanode解决方法
qq_42321843的博客
03-10 2657
1.关闭集群 stop-dfs.sh stop-yarn.sh 2.将集群中每个datanode节点的VERSION删除 （VERSION里面记录着datanodeid信息 路径/hadoop/tmp/dfs/data/current） cd /usr/local/hadoop/tmp/dfs/data/current/ ls rm -f VERSION 3.执行hdfs namenode -fo...
启动 Hadoop 后没有 dataNode 进程
是微风，是晚霞，是无可替代
11-22 3445
原因：进行 hadoop 格式化的时候没有事先结束所有进程，或者多次进行了 format 导致的 datanode 的 clusterID 和 namenode 的 clusterID 不匹配，从而在启动后没有 datanode 进程。
HADOOP 启动后没有datanode解决办法（适用于所有节点datanode）
FBFBSDF的博客
09-21 2815
hadoop集群datanode无法启动
启动hadoop集群全部服务时没有datanode服务
APguantou的博客
04-04 1798
我在安装时将hadoop安装在 /software/hadoop/hadoopducument/ 下 ，并将安装包改名为HADOOP。如图所示，开启时datanode可以正常开启，其它服务都正常，唯独没有datanode，关闭时显示。今天在启动hadoop集群时，开启全部服务后，用jps检测，发现没有datanode服务。1.编辑hadoop目录下的/etc/hadoop/core-site.xml。2.切换至上述查找到的路径中,并查看该目录下的内容。可能的原因是hadoop主节点格式化次数过多。
启动hadoop后没有datanodes的问题
十万小时之旅
04-13 642
ubuntu10.10每次开机后会在/etc/hosts自动生成一行代码：127.0.0.1 localhost localhost.local，而ubuntu10.04版本则不会。在hadoop中，由于127.0.0.1与主机绑定，导致datanode一直试图链接namenode而连接不上，只要开机后把/etc/hosts 下的127.0.0.1 localhost localhost.loca...
hadoop报错：Hadoop启动时，没有启动datanode
five小点心的博客
02-06 5296
hadoop启动时没有DataNode节点
hadoop启动中缺少datanode
weixin_30627341的博客
06-03 247
原文链接地址：https://blog.csdn.net/islotus/article/details/78357857 本人测试有效： 首先删除hadoop下的dfs文件（注：本文件不一定在hadoop的安装目录下）我的安装目录地址为：/home/username/hadoop/dfs 执行命令 rm -r dfs 删除 然后进入hadoop安装目录下：（cd /home/guoha...
hadoop集群启动后datanode没有启动
m0_51697147的博客
11-20 6732
解决方法： 第一步：关掉所有启动的集群 在hadoop3.1.3目录下，输入命令sbin/stop-all.sh 第二步：删除每个集群中datanode存放路径的数据,data 和logs 输入命令：rm -rf data/ logs/ 第三步：重新格式化 输入命令：hadoop namenode -format 第四步：启动集群 在hadoop3.1.3目录下，输入命令sbin/start-all.sh 第五步：查看进程 输入命令：jps
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值