hadoop jps命令启动后无法显示datanode

最新推荐文章于 2024-09-12 00:12:35 发布
最新推荐文章于 2024-09-12 00:12:35 发布
阅读量1.1k 收藏 5
点赞数 5
分类专栏： hadoop 文章标签： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ddddandandan/article/details/108988444
版权

hadoop jps命令启动后无法显示datanode

问题原因：多次运行hadoop namenode -format命令

解决方案
将namenode的clusterID复制给datanode的clusterID，使其一致。

1、查看路径
查看hdfs-site.xml文件中dfs.datanode.data.dir和dfs.namenode.name.dir中的value值

在这里插入图片描述
2、将namenode的clusterID复制下来
执行cd命令
例如我这里：cd /hadoop/tmp/dfs/name ls进行查看
在这里插入图片描述
将current里的VERSION文件中的clusterID复制下来
例如我这里cd current cat VERSION
在这里插入图片描述
3、将复制下来clusterID粘贴到datanode的clusterID中（与上面操作类似 vi一下就可以了）

4、启动start-dfs.sh

再执行jps就datanode就出现了

dear visionary
关注
专栏目录
执行jps没有datanode进程
weixin_41767412的博客
01-03 1939
配置完impala后重启集群，使用jps后发现所有datanode都没启动。
启动Hadoop后 jps 没有出现DataNode进程 的解决方法
KingSuccesHou的博客
02-26 8591
一、出现问题的原因 在启动Hadoop之前，进行了多次的格式化，导致DataNode的ID发生了变化。 二、问题解决方法 我们可以让NameNode的clusterID与DataNode的clusterID一致，这样就可以解决这个问题了。 1.首先去到你的hadoop目录下 2.在进入到 hadoop-2.8.1/tmp目录下 3.在进入到dfs中 ls 4.在进入到目录name中ls 5.在进入到current中ls 6.使用命令（vi或vim）打开VERSI..
Hadoop运行jps后没有datanode进程
m0_55070913的博客
03-25 3152
我总共有3个hadoop集群，hadoop102，hadoop103，hadoop104，其中hdfs从hadoop102启动。 集群规划如下： jps没有datenode： 1、停止所有jps服务（以下命令在hadoop2这台服务器上执行）。 $jps #如果只有Jps进程，则无需执行下面的代码，否则执行。 $cd /opt/module/hadoop-2.7.2/ $sbin/stop-all.sh 2、删除VERSION（以下命令在三台服务器上都执行）。 VERSION的目录所在如下所示，首先进入
Hadoop问题：DataNode进程不见了
weixin_34297704的博客
05-20 1391
2019独角兽企业重金招聘Python工程师标准>>> ...
jps没有datanode
weixin_44723678的博客
12-14 4621
启动start-all.sh后jps发现没有datanode进程。 查看日志 2018-02-27 13:54:29,161 WARN org.apache.hadoop.hdfs.server.common.Storage: java.io.IOException: Incompatible clusterIDs in /home/hadoop/app/tmp/dfs/data: namenode clusterID = CID-d92efb85-6a10-4a65-abe8-451f89eb845c;
jps没有datanode进程
qq_43640212的博客
07-05 8664
jps没有datanode进程 问题描述： 最近配置Hadoop的时候出现了这么一个现象，启动之后，使用jps命令之后没有datanode进程 原因： 我在启动Hadoop之前和启动之后，曾经多次使用如下命令，针对NameNode进行格式化：hadoop namenode -format，这个问题，还不是直接多次格式化造成的，而是格式化之后，启动了Hadoop，然后将Hadoop关闭，重新格式化，再启动Hadoop造成的，这个时候就发现，DataNode线程在jps命令中消失了。 解决方法： 将格
Hadoop | 解决启动Hadoop，jps后无namenode,datanode等进程
热门推荐
martinniee
01-11 1万+
问题描述 最近因为想修改一下主机名，用户名什么的 但是一开始没有注意到主机名和用户名对于Hadoop服务的影响 导致修改后，导致Hadoop启动，失败，即jps后，没有namenode,datanode，显然这两个文件对于hadoop是至关重要的，要不然无法获取数据 一开始没有考虑查看日志排错(因为对于异常处理方面不敏感:???? 因为机缘巧合，碰巧试了试，然后就行了 之所以出错，归根结底还是对于原理不熟 解决方案 首先要知道Linux下的主机名和用户名是什么，如何查看 命令行终端下 格式 : 用户名@主机
Hadoop | 解决启动Hadoop集群，DataNode不存在的问题
martinniee
01-10 4351
问题描述 1.使用 ./sbin/start-all.sh启动Hadoop集群，过程中DataNode没有启动 2.使用jps查看进程时，没有DataNode节点 在此需注意Hadoop集群是如何搭建的 本实验是使用(伪分布式) 1.Master节点 其他节点在Master节点中 2.Slave节点 DataNode在Slave节点中 可用方案 网上可用方案，及其原因分析是 原因1 多次格式化nameNode节点 (hadoop namenode -format),是NameNode和DataNod
hadoop启动后jps进程没有Datanode进程的解决方法_jps没有datanode进程
2401_84167086的博客
04-17 737
2：我认为最有效的解决方法就是将虚拟机hadoop01，hadoop02，hadoop03的hadoop目录下的data文件rm -rf data删除，感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！2：可能是由于多次输入hdfs namenode -format格式化的原因，使其Datanode被覆盖了。1：重新一步一步检查配置文件，缺一不可，配置好后重新发布给其他两台虚拟机，再进行格式化。再重新发布给其他两台，格式化。
Hadoop集群开启后使用jps命令查看发现没有NameNode、SecondaryNameNode、DataNode、NodeManager进程，缺少进程。
最新发布
m0_74132943的博客
09-12 873
今天安装Hadoop集群，安装完成使用jps命令查看发现没有NameNode、SecondaryNameNode、DataNode、NodeManager进程，别人jps后都有6个在跑，我就两个。重启服务...........................................................
关于为什么datanode启动后jps没有显示的问题的一点意见
上白书妖
02-29 1584
大家好, 我是上白书妖! 知识源于积累,登峰造极源于自律 今天我根据以前所以学的一些文献,笔记等资料整理出一些小知识点,有不当之处,欢迎各位斧正 [shangbaishuyao@Hadoop102 hadoop-2.7.2]$ sbin/hadoop-daemon.sh start datanode starting datanode, logging to /opt/module/hadoop-...
Hadoop中正常启动了datanode但管理界面却却显示0个datanode节点或者只有本机的一个datanade，DFS Used显示0（100%）
Cludy Sky的博客
09-16 7155
Hadoop中正常启动了datanode但管理界面却却显示0个datanode节点或者只有本机的一个datanode，DFS Used显示0（100%） 日志显示： Problem connecting to server: master/192.168.216.10:9001
Hadoop dfs启动jps后没有DataNode问题
jorey66的博客
10-09 2763
Hadoop dfs启动jps后没有DataNode问题 前言 jps后没有DataNode问题 原因是多次格式化NameNode导致。在配置文件中保存的是第一次格式化时保存的namenode的ID，因此就会造成datanode与namenode之间的id不一致。 解决方法：1.（网上方法）关闭ssh，首先找到core-site.xml中安装namenode的地址，可以将namenode中current下version的clusterID把DataNode下的current的version覆盖 2.关闭s
hadoop启动查看jps没有datanode
weixin_51775941的博客
04-09 897
Hadoop启动查看jps没有datanode： 解决方法： 找到datanode带有log的文件 将文件打开： 找到culsterID这一串代码并将其复制 打开current的目录下的VERSION文件 将VERSION中的clusterID改成上面复制的ID 最后重启一下Hadoop就出现datanode了 ...
启动hadoop后jps查看进程没有datanode
m0_46459772的博客
09-30 672
启动hadoop后jps查看进程没有datanode 这个坑点是重复格式化造成的。 当我们执行文件系统格式化时，会在namenode数据文件夹（即配置文件中dfs.name.dir在本地系统的路径）中保存一个current/VERSION文件，记录namespaceID，标识了所格式化的 namenode的版本。如果我们频繁的格式化namenode，那么datanode中保存（即配置文件中dfs.data.dir在本地系统的路径）的current/VERSION文件只是你第一次格式化时保存的namenode
jps不出现datanode_启动Hadoop时候datanode没有启动的原因及解决方案
weixin_28949743的博客
02-06 5233
有时候我们start-dfs.sh启动了hadoop但是发现datanode进程不存在一、原因当我们使用hadoop namenode -format格式化namenode时，会在namenode数据文件夹(这个文件夹为自己配置文件中dfs.name.dir的路径)中保存一个current/VERSION文件，记录clusterID，datanode中保存的current/VERSION文件中的c...
jps不出现datanode_Hadoop集群所有的DataNode都启动不了解决办法
weixin_42120275的博客
02-06 313
首先会出现几种情况，才会出现启动不了datanode的情况。1.首先修改过master那台的配置文件，2.多次Hadoop namenode -format这种不好的习惯。一般会出现一下报错：Java.io.IOException: Cannot lock storage /usr/hadoop/tmp/dfs/name. The directory is already locked.或者是：[...
解决Hadoop伪分布式集群jps没有datanode节点问题
sunzhipan11的博客
08-10 1万+
解决Hadoop伪分布式集群没有datanode节点问题
hadoop启动后jps没有datanode
m0_56731259的博客
03-12 8811
Hadoop 启动后使用JPS查看没有DataNode 在伪分布式运行hadoop，发现DataNode没有启动： 一般由于多次格式化NameNode导致。在配置文件中保存的是第一次格式化时保存的namenode的ID，因此就会造成datanode与namenode之间的id不一致。 发现错误之后在hadoop所在位置中找到logs路径： 找到datanode日志文件打开。 找到错误的地方 复制namenode clusterID。 找到配置文件core-site.xml 找到data目录
hadoop jps后没有datanode
03-16
如果在运行Hadoop集群时，使用hadoop jps命令查看进程列表，但是没有看到datanode进程，可能有以下几种原因： 1. Datanode进程没有启动：可以使用hadoop-daemon.sh start datanode命令手动启动datanode进程。 2. ...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值