关于多次格式化后启动Hadoop后主节点或从主点没有DataNode的问题

已于 2022-03-23 16:46:36 修改
阅读量3.7k 收藏 12
点赞数 3
分类专栏： 笔记
于 2022-03-23 16:35:37 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45871142/article/details/123689220
版权

1,找到你配置的hdfs-size.xml文件
如图
在这里插入图片描述
然后打开
cd /usr/local/hadoop-3.2.0/data/name

gedit /current/VERSION

找到
我的是
clusterID=CID-4eb876d0-d4c6-4ccd-8f93-b39c6645108d
这个id然后复制你自己这一段（这个会有差异）

然后再返回

再进入
cd /usr/local/hadoop-3.2.0/data/data/current

gedit VERSION
把复制的id

替换原来的

然后报存退出

然后
cd /usr/local/hadoop-3.2.0/data/data/current
source VERSION

再重新启动Hadoop集群，切换到hadoop目录下
sbin/start-all.sh

CoralSea.
关注
  • 3
    点赞
  • 踩
  • 12
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
启动Hadoop后 没有DataNode进程 的解决方法
09-30
启动Hadoop后 没有DataNode进程 的解决方法。 一篇文章带你快速了解！
解决hadoop格式化namenode两次导致datanode不能正常启动问题
weixin_46964107的博客
03-30 4054
解决hadoop格式化namenode两次导致datanode不能正常启动问题：删除tmp文件夹并重新格式化即可
解决多次重新初始化导致的hadoop集群节点不启动
最新发布
legendasi的博客
05-23 973
在搭建完hadoop集群后，需要对主节点进行初始化（格式化），而且主节点格式化操作只能进行一次。当我们不小心多次初始化（hadoop namenode -format），会导致启动hadoop集群时，主节点DataNode或NameNode无法启动。
搭建hadoop集群初次格式化namenode时不小心格式化了多次，主节点namenode或者从节点datanode进程不能启动，怎么办？
qq_58281481的博客
09-21 6878
我们在格式化时hadoop集群时，不小心格式化多次，就会导致主从节点之间互相不识别。然后导致启动hadoop集群时，主节点的namenode进程可能不会启动或者从节点的datanode可能不会启动。
hadoop格式化namenode后，出现节点启动不全的情况-------解决方案
李子翔
05-22 2391
这里主要处理的异常情况是：namenode,datanode,或者其他节点在“启动服务”后没有显示的情况（实况是没有启动） 首先来分析一下出现这种状况的原因，这是很多新手都会犯的错误，原因也是多种多样的，在配置文件没有出错的情况下，最有可能是小伙伴们多次进行格式化了。 ***在这里说一下 ，在没有删除因格式化产生的文件前重新格式化是没有用的，hadoop不会覆盖重写已有文件！！！ *** 而namenode，datanode等启动不全的原因是因为底层文件version的配置信息clusterID不一样导致的
关于hadoop集群开启后，datanode为0个，找不到datanode的解决方法
weixin_54628931的博客
03-26 4020
这个问题也卡住我好几天，通过百度和自己摸索，最终找到问题的答案，如果有不对的地方，请大神们批评指正。 相信各位已经配置好了hdfs-site.xml文件，也运行过hdfs namenode -format命令，但是还是没有找到datanode。可以尝试以下步骤： （1）进入到vi /opt/rh/hadoop-3.2.2/etc/hadoop/hdfs-site.xml 打开这个配置文件，查看你的name和data文件夹的地方。 随后进入到这两个文件夹下，使用rm -rf *命令删除文件夹...
出错记录：hadoop 主节点没有datanode，spark报错：There are 0 datanode(s) running and 1
qq_43551883的博客
10-14 733
大数据课实验1的踩坑记录
关于Hadoop多次格式化后，无法启动datanode
nu_li_de_a_ye的博客
10-16 2068
在进行文件系统格式化时，会在NameNode节点的data目录中保存一个current/VERSION文件，记录当前的clusterID。导致集群中DataNode与NameNode中clusterID不同，从而导致集群的DataNode无法正常启动。接着打开你出现问题的那个文件 我的是cd /export/servers/hadoop-2.7.4/tmp/dfs/data，把你的namenode的clusterID复制下来。打开后找到里面的current/VERSION。就可以看到出现的问题在哪。
hadoop多次（两次以上）初始化以后，无法启动DataNode节点（已解决）
weixin_44146604的博客
05-08 5413
1、问题描述： 多次格式化文件系统时，会出现datanode无法启动 2、问题产生原因： 执行文件系统格式化时（即执行命令$ bin/hadoop namenode -format 后），会在namenode数据文件夹（即配置文件中dfs.name.dir在本地系统的路径）中保存一个hadoopData/name（我的路径配置在core-cite.xml中）文件，记录namespaceID，标识了所格式化的namenode的版本。如果我们频繁的格式化namenode，那么datan...
hadoop 多次格式化format namenode 导致节点不能启动解决
热门推荐
qq_41059374的博客
06-14 2万+
1.  具体配置     我用的是vmware配的虚拟机，一个master，2个slave2. 遇到的问题hadoop 多次格式化format namenode 导致节点不能启动，出现这个问题的原因是多次格式化会导致节点的clusterID不一致3. 解决方法    我是参考的stackoverflow的方法，有一些不同           https://stackoverflow.com/qu...
3台机器配置hadoop集群_Hadoop学习之路（三）Hadoop集群搭建和简单应用
weixin_39747807的博客
11-30 260
概念了解主从结构：在一个集群中，会有部分节点充当主服务器的角色，其他服务器都是从服务器的角色，当前这种架构模式叫做主从结构。主从结构分类：1、一主多从2、多主多从Hadoop中的HDFS和YARN都是主从结构，主从结构中的主节点和从节点有多重概念方式：1、主节点　　从节点2、master　　slave3、管理者　　工作者4、leader　　followerHadoop集群中各个角色的名称...
Hadoop集群datanode磁盘不均衡的解决方案
02-25
因业务需要搭建一个新hadoop集群，并将老的hadoop集群中的数据迁移至新的hadoop集群，而且datanode节点不能全部上线，其中还可能会出现节点上线或下线的情况，这个时候就很容易出现机器与机器之间磁盘的均衡的情况，...
hadoop格式化HDFS出现错误解决办法
01-10
 出现这种问题的原因是Hadoop在格式化HDFS的时候，通过hostname命令获取到的主机名与/etc/hosts文件中进行映射的时候，没有找到。 解决方案：  1、修改/etc/hosts内容    2、修改 /etc/sysconfig/network 中
hadoop重新格式化HDFS步骤解析
09-30
主要介绍了hadoop重新格式化HDFS步骤解析，由于此方法需要将HDFS中数据全部清除，用者需注意。
解决Hadoop中多次格式化导致DataNode无法启动的问题
独醉的博客
04-27 2560
一般由于多次格式化NameNode导致。在配置文件中保存的是第一次格式化时保存的NameNode的ID，因此就会造成NataNode与NameNode之间的id不一致 如果启动Hadoop后用jps命令发现DataNode节点未启动则有可能是多次格式化的问题 首先查看DataNode节点的日志 路径如下（其中hadoop为自己hadoop的安装路径） hadoop/logs/hadoop-root...
启动 Hadoop 集群时datanode节点不启动原因之一——格式化次数太多的解决办法
Emotionameng的博客
09-27 936
http://jingyan.baidu.com/album/3c343ff7e75e9e0d36796347.html?stepindex=2&st=2&os=0&bd_page_type=1&net_type=&ssid=&from=研究了好几天，这个方法完美解决
Hadoop报错之启动集群主机无Datanode
ryluii的博客
10-13 706
开启集群主机DataNode节点缺失解决办法
【Hadoop】Hadoop集群多次初始化后无法启动DataNode节点
HR的博客
12-26 1557
描述 由于多次使用bin/hadoop namenode -format命令导致集群无法启动DataNode节点 产生原因 执行文件系统格式化时（bin/hadoop namenode -format ），会在namenode数据文件夹（即配置文件中dfs.name.dir在本地系统的路径）中保存一个文件，记录clusterID，标识了所格式化的namenode的版本。如果我们频繁的格式化namenode，那么datanode中保存（即配置文件中dfs.data.dir在本地系统的路径）的文件只是你..
Hadoop集群启动从节点没有DataNode
m0_61232019的博客
03-03 7054
之前启动hadoop集群的时候都没有问题，今天启动hadoop集群的时候，从节点的DataNode没有启动起来。
hadoop从节点没有datanode
03-17
Hadoop是一个分布式计算系统，其中包含两种节点类型：NameNode和DataNode。NameNode负责管理文件系统的元数据，而DataNode负责存储文件系统中的实际数据。如果一个节点没有DataNode，那么这个节点就不能存储数据，...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值