hadoop里面的dataname没用启动的解决方法

最新推荐文章于 2023-02-06 10:19:48 发布
最新推荐文章于 2023-02-06 10:19:48 发布
阅读量2.1k 收藏 1
点赞数 2
分类专栏： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dxyna/article/details/79691353
版权
首先查看存namenode元数据和datanode元数据的路径 current的VERSION
 
find / -name current    --> 通过查找可以找到,此时存储的路径

           


    cd进入这俩个文件夹中分别找到VERSION文件,查看俩个的clusterID是否一样

    如果不一样将俩个修改成一样的之后重启集群就好了

    原因是:执行多次namenode -format后（中间伴随着启动）会出现这样的问题



hadoop遇到的问题即解决方法
bigmeteor的博客
06-24 2107
一、#启动hadoop后，使用jps出现xxxx jps ，是因为集群没有启动， 需要执行 start-dfs.sh start-yarn.sh mr-jobhistory-daemon.sh start historyserver 二、启动hadoop之后，使用jps查看，hadoop01服务器中没有namenode，是由于之前格式化太多导致的 解决方法： 首先停止hadoop的所有进程：stop-all.sh ...
Linux修改hadoop配置文件及启动hadoop集群详细步骤
最新发布
m0_74830349的博客
09-22 5334
pwd。
DataNode无法启动
钱佳佳的博客
01-08 563
当datanade无法启动时，删除hadoop安装目录下的tmp目录，然后再重新启动，亲测可以成功！
DataNode没有启动的问题
qq_40651283的博客
05-14 302
问题：启动hdfs，datanode没有启动 出现现象： ./op/ssh_all.sh jps 进程看不到DataNode 原因： .dataname初始化了两次，导致datanode的clusterID 和 namenode的clusterID 不匹配。 解决办法： 通过hdfs-site.xml文件，找到datanode和namenode配置的dir路径。namenode路径下的/current下的VERSION 文件中的clusterID复制到datanode路径下的/current
Hadoop启动datanode/namenode失败或者无法启动
渐宽阁读书小弟
03-31 734
文章目录问题描述问题产生原因解决方法注：看有没有重要数据吧，但是一般频发格式化namenode时，应该也知道自己没啥重要数据，采取简单粗暴的方法吧 问题描述 当我使用./hdfs namenode -format 多次对文件系统进行格式化的时候，会出现datanode或者namenode无法启动的问题 问题产生原因 执行文件系统格式化时，会在namenode数据文件夹，即配置文件 hdfs-sit...
Hadoop集群中DataNode启动不了
南风晚
12-20 1546
主要原因 是因为datanode的clusterID 和 namenode的clusterID 不匹配 解决办法 停止Hadoop的所有进程 删除每个节点Hadoop目录下 logs 和 tmp 手动创建每个节点下 logs 和 tmp 文件夹 到Hadoop/bin目录下，重新格式化： hdfs namenode -format 没有问题后，重新启动hadoop集群，DataNode...
datanode无法启动解决方法
qq_56572867的博客
04-18 716
简明扼要一点，我尝试了两个方法 第一个方法就是将name中的current中的VERSION复制下来，然后粘贴到data中的VERSION （注：可能有的人不知道这个怎么找，首先name应该是在hadoop-3.1.3下的data/dfs/name, 而data可以在hadoop下的hdfs-site.xml中的data.dir下找到路径，我的是在hdfsdata下的 且如果你有写了储存策略，可能就会有两个文件，ssd，ram_disk等，进去都把vers...
hadoop中运行jps少namenode或者datanode节点问题
sinat_38832964的博客
09-17 4927
如果是少namenode则是因为没有对HDFS格式化。执行命令：hadoop namenode -format 并按照相关提示进行格式化。 如果是少datanode则可能是因为对HDFS进行了多次格式化，造成clusterID不一致。因为每次格式化，namenode的name->current->VALUE中的clusterID值都会发生变化，而datanode的clusterID值...
Hadoop集群启动和停止方法
苍夜月明的博客
07-04 4981
    先看一下集群是怎么规划的，这样就知道哪个服务器该开哪个了，不能瞎开啊！    注意点：所有服务器的 HDFS 都有 DataNode，YARN 都有 NodeManagerResourceManager 很消耗内存，不能和 NameNode、SecondaryNameNode 配置在同一台机器上。（有钱人另说，电脑好啥都能干）NameNode和SecondaryNameNode不能在同一台服务器上          什么叫一起启动 / 停止呢？ 就是一下把hadoop102、hadoop103、ha
Hadoop中namenode启动不起来解决方法
qq_44793689的博客
04-14 2827
之前Hadoop集群都能启动成功，今天准备使用hive的时候发现Hadoop中的namenode 启动不起来的，查看日志：2020-04-14 22:25:31,793 WARN org.apache.hadoop.hdfs.qjournal.client.QuorumJournalManager: Remote journal 192.168.52.110:8485 failed to writ...
启动Hadoop后 jps 没有出现DataNode进程 的解决方法
KingSuccesHou的博客
02-26 8931
一、出现问题的原因 在启动Hadoop之前，进行了多次的格式化，导致DataNode的ID发生了变化。 二、问题解决方法 我们可以让NameNode的clusterID与DataNode的clusterID一致，这样就可以解决这个问题了。 1.首先去到你的hadoop目录下 2.在进入到 hadoop-2.8.1/tmp目录下 3.在进入到dfs中 ls 4.在进入到目录name中ls 5.在进入到current中ls 6.使用命令（vi或vim）打开VERSI..
一键启动NameNode和DataNode--shell脚本
weixin_33918114的博客
11-25 134
　　使用shell脚本，一键启动hadoop中的NameNode和DataNode。分为普通版和装逼版。装逼版较普通版多了很多判断和信息提示，当然主要还是为了我练习shell脚本而写的。 　　如果想实现复用，请注意： 　　　　1.将HADOOP_HOME改为自己的hadoop安装路径。 　　　　2.脚本的权限不低于700 　　如果复用装逼版在满足上面的条件后，还需要注意 　　　　1.pr...
Hadoop启动后jps查询后没有namedata，datanode进程
热门推荐
whs0329的博客
10-31 2万+
我的namedata进程突然之间没有的原因：是因为我之前没有停止hadoopd的集群又重新启动hadoopde集群 还有其他原因也会导致比如：1.直接关闭虚拟机，也没有停止hadoop 集群 2.格式化namenode之前，没有删除data里面的数据和日志，导致 namenode和datanode的cl...
hadoop集群启动jps查看后没有DATANODE或NAMENODE
weixin_43837419的博客
11-21 1952
没有DATANODE 删除/usr/local/hadoop/tmp/dfs/data/current/VERSION文件后 ./sbin/start-dfs.sh即可 没有NAMENODE ./bin/hdfs namenode -format ./sbin/start-dfs.sh即可
Hadoop中DataNode没有启动解决办法
weixin_44593504的博客
03-18 4368
原因：多次格式化NameNode导致。在配置文件中保存的是第一次格式化时保存的namenode的ID，因此就会造成datanode与namenode之间的id不一致。 解决： 1.找到hadoop安装目录下的logs文件夹，该文件夹下有多个日志，找到最新datanode的日志； 2.将找到的datanode日志打开，拉到最后，可以发现报错信息,复制红框信息：clusterID = CID-101f964f-1560-4dd6-8f85-42b24a4bd3d0，待下一步用； .
Hadoop中namenode/datanone没有启动
千年孤寂
06-08 1018
 用jps查看Hadoop启动的进程时发现namenode/datanode进程没有被启动 原因之一：Hadoop启动时没有发现namenode/datanode的位置 解决方案： 后来进过仔细检查发现是我的hdfs-site.xml 文件没有配置好。正确的配置方式如下：            dfs.replication         1
hadoop报错：Hadoop启动时，没有启动datanode
five小点心的博客
02-06 5369
hadoop启动时没有DataNode节点
hadoop起动后没有datanode的问题
student241的博客
09-21 8814
https://blog.csdn.net/u012500868/article/details/78164572 https://blog.csdn.net/hzdxw/article/details/51960211 解决办法一: 根据日志中的路径，cd /home/storm/hadoop/tmp/dfs，能看到 data和name两个文件夹， 将name/current下的VERSI...
出现namenode不能启动的情况，就把hadoop安装目录下的hadoop目录下的data和name文件夹清空，
小爷欣欣
03-27 5237
出现namenode不能启动的情况，就把hadoop安装目录下的hadoop目录下的data和name文件夹清空，再./bin/hadoop namenode -format 格式化namenode。最后重新启动。
Hadoop常见错误解析与解决方案
"Hadoop常见问题及解决方法包括NameNode无法启动、端口占用以及安全模式等问题，这些问题在Hadoop的日常使用中较为普遍。解决这些问题需要理解Hadoop的架构和配置，以及如何通过日志分析错误。" 在安装或运行Hadoop...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值