hadoop里面的dataname没用启动的解决方法

最新推荐文章于 2023-07-28 19:25:10 发布
最新推荐文章于 2023-07-28 19:25:10 发布
阅读量2.1k 收藏 1
点赞数 2
分类专栏： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dxyna/article/details/79691353
版权
首先查看存namenode元数据和datanode元数据的路径 current的VERSION
 
find / -name current    --> 通过查找可以找到,此时存储的路径

           


    cd进入这俩个文件夹中分别找到VERSION文件,查看俩个的clusterID是否一样

    如果不一样将俩个修改成一样的之后重启集群就好了

    原因是:执行多次namenode -format后（中间伴随着启动）会出现这样的问题



Se_cure
关注
专栏目录
hadoop遇到的问题即解决方法
bigmeteor的博客
06-24 2077
一、#启动hadoop后，使用jps出现xxxx jps ，是因为集群没有启动， 需要执行 start-dfs.sh start-yarn.sh mr-jobhistory-daemon.sh start historyserver 二、启动hadoop之后，使用jps查看，hadoop01服务器中没有namenode，是由于之前格式化太多导致的 解决方法： 首先停止hadoop的所有进程：stop-all.sh ...
Linux修改hadoop配置文件及启动hadoop集群详细步骤
最新发布
m0_74830349的博客
09-22 5129
pwd。
DataNode无法启动
钱佳佳的博客
01-08 550
当datanade无法启动时，删除hadoop安装目录下的tmp目录，然后再重新启动，亲测可以成功！
DataNode没有启动的问题
qq_40651283的博客
05-14 292
问题：启动hdfs，datanode没有启动 出现现象： ./op/ssh_all.sh jps 进程看不到DataNode 原因： .dataname初始化了两次，导致datanode的clusterID 和 namenode的clusterID 不匹配。 解决办法： 通过hdfs-site.xml文件，找到datanode和namenode配置的dir路径。namenode路径下的/current下的VERSION 文件中的clusterID复制到datanode路径下的/current
Hadoop集群中DataNode启动不了
南风晚
12-20 1524
主要原因 是因为datanode的clusterID 和 namenode的clusterID 不匹配 解决办法 停止Hadoop的所有进程 删除每个节点Hadoop目录下 logs 和 tmp 手动创建每个节点下 logs 和 tmp 文件夹 到Hadoop/bin目录下，重新格式化： hdfs namenode -format 没有问题后，重新启动hadoop集群，DataNode...
datanode无法启动解决方法
qq_56572867的博客
04-18 698
简明扼要一点，我尝试了两个方法 第一个方法就是将name中的current中的VERSION复制下来，然后粘贴到data中的VERSION （注：可能有的人不知道这个怎么找，首先name应该是在hadoop-3.1.3下的data/dfs/name, 而data可以在hadoop下的hdfs-site.xml中的data.dir下找到路径，我的是在hdfsdata下的 且如果你有写了储存策略，可能就会有两个文件，ssd，ram_disk等，进去都把vers...
hadoop中运行jps少namenode或者datanode节点问题
sinat_38832964的博客
09-17 4896
如果是少namenode则是因为没有对HDFS格式化。执行命令：hadoop namenode -format 并按照相关提示进行格式化。 如果是少datanode则可能是因为对HDFS进行了多次格式化，造成clusterID不一致。因为每次格式化，namenode的name->current->VALUE中的clusterID值都会发生变化，而datanode的clusterID值...
启动Hadoop后 jps 没有出现DataNode进程 的解决方法
KingSuccesHou的博客
02-26 8583
一、出现问题的原因 在启动Hadoop之前，进行了多次的格式化，导致DataNode的ID发生了变化。 二、问题解决方法 我们可以让NameNode的clusterID与DataNode的clusterID一致，这样就可以解决这个问题了。 1.首先去到你的hadoop目录下 2.在进入到 hadoop-2.8.1/tmp目录下 3.在进入到dfs中 ls 4.在进入到目录name中ls 5.在进入到current中ls 6.使用命令（vi或vim）打开VERSI..
Hadoop中namenode启动不起来解决方法
qq_44793689的博客
04-14 2748
之前Hadoop集群都能启动成功，今天准备使用hive的时候发现Hadoop中的namenode 启动不起来的，查看日志：2020-04-14 22:25:31,793 WARN org.apache.hadoop.hdfs.qjournal.client.QuorumJournalManager: Remote journal 192.168.52.110:8485 failed to writ...
Hadoop集群的DataNode启动不了的解决办法
BigData_Hubert的博客
08-18 3638
关于Hadoop集群的DataNode启动不了的问题是安装Hadoop最常见的坑，下面我介绍五种方法来填坑。 异常提示 hadoop集群子节点目录下 jps 操作没有显示datanode的进程 http://master-ip: 8088窗口下： java操作hadoop异常提示：Java.io.IOException: Cannot lock storage /usr/hadoop/tmp/dfs/name. The directory is already locked. 出现上述3者情况之一，都
一键启动NameNode和DataNode--shell脚本
weixin_33918114的博客
11-25 127
　　使用shell脚本，一键启动hadoop中的NameNode和DataNode。分为普通版和装逼版。装逼版较普通版多了很多判断和信息提示，当然主要还是为了我练习shell脚本而写的。 　　如果想实现复用，请注意： 　　　　1.将HADOOP_HOME改为自己的hadoop安装路径。 　　　　2.脚本的权限不低于700 　　如果复用装逼版在满足上面的条件后，还需要注意 　　　　1.pr...
【大数据分析与应用】Hadoop: 启动后发现没有DataNode
zombotany的博客
10-16 2399
DataNode的ClusterID与NameNode的ClusterID不完全一致。
hadoop启动后没有datanode的可能问题解决
weixin_56023591的博客
07-28 631
2.在hadoopdata文件（配置文件时设置的路径）里的data和name文件里的VERSION的clusterID要一致。1.更改~/.bash_profile或者profile文件后没进行source导致路径没有改变。
datanode消失，并且data文件夹不见了的解决方法
alcheee的博客
11-25 2526
datanode无法启动
hadoop起动后没有datanode的问题
student241的博客
09-21 8772
https://blog.csdn.net/u012500868/article/details/78164572 https://blog.csdn.net/hzdxw/article/details/51960211 解决办法一: 根据日志中的路径，cd /home/storm/hadoop/tmp/dfs，能看到 data和name两个文件夹， 将name/current下的VERSI...
hadoop启动后，没有datanode怎么办
qq_34268459的博客
06-21 6822
根据日志中的路径，cd /home/hadoop/tmp/dfs，能看到 data和name两个文件夹。方法一：删除DataNode的所有资料及将集群中每个datanode节点的/dfs/data/current中的VERSION删除，然后重新执行hadoop namenode -format进行格式化，重启集群，错误消失。方法二： 将name/current下的VERSION中的clusterI...
Hadoop中namenode/datanone没有启动
千年孤寂
06-08 997
 用jps查看Hadoop启动的进程时发现namenode/datanode进程没有被启动 原因之一：Hadoop启动时没有发现namenode/datanode的位置 解决方案： 后来进过仔细检查发现是我的hdfs-site.xml 文件没有配置好。正确的配置方式如下：            dfs.replication         1
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值