解决启动hadoop后jps没有从节点没有DataNode问题

最新推荐文章于 2024-04-17 13:22:15 发布

qq_46085912

最新推荐文章于 2024-04-17 13:22:15 发布

阅读量3.9k

点赞数 2

文章标签： hadoop hdfs big data hbase

本文链接：https://blog.csdn.net/qq_46085912/article/details/122102075

版权

进入hadoop安装目录找到core-site.xml（/usr/local/soft/hadoop-3.2.0/etc/hadoop/）并查看

找到：

 <property>
      <name>hadoop.tmp.dir</name>
      <value>/data/hadoop/tmp</value>
    </property>

去到 /data/hadoop/目录下进入/data/hadoop/hdfs/data/current/ 找到VERSION文件，把从节点的clusterID改成与主节点的相同，然后再start-all.sh，然后jps就有DataNode了。

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

qq_46085912

关注关注

2
点赞
踩
20

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

jps不出现datanode_从节点JPS没有dataNode的解决办法

weixin_39612228的博客

12-19

3530

从节点JPS没有dataNode的解决办法查看logs日志文件，找到Hadoop的安装目录下logs目录，用cat hadoop-root-datanode-localhost.localdomain.log进行日志查看1、java.net.BindException: 无法指定被请求的地址另一种错误表现方式是：执行hadoop fs -put命令报错could only be replicate...

Hadoop | jps后发现datanode没有启动

虎鲸虎鲸

10-22

744

参考教程简略：Hadoop中DataNode没有启动解决办法详细：Hadoop中DataNode没有启动解决办法主要原因多次hdfs namenode-format , 导致出现 namenode 的 clusterID 和 datanode 的 clusterID 不一致的情况解决办法 ①ll ②cd logs ③ 查看log内容 namenode的clusterID cat ...

参与评论您还未登录，请先登录后发表或查看评论

Hadoop集群启动从节点没有DataNode

m0_61232019的博客

03-03

7503

之前启动hadoop集群的时候都没有问题，今天启动hadoop集群的时候，从节点的DataNode没有启动起来。

hadoop 集群启动从节点无datanode

T_Y_F_的博客

10-19

2603

hadoop 集群启动从节点无datanode

解决Hadoop完全分布式集群中从节点jps没有datanode节点问题

木子一个Lee的博客

10-23

8940

也是进入这个目录，只不过namenode中的name文件在datanode是变为了data文件，即/tmp/dfs/data/current。当用start-dfs.sh和start-yarn.sh后，在slave节点(从节点)中用jps命令查看进程。有时候可能发现没有Datanode，即只有两项(第一项和最后一项)。clusterID替换掉datanode的clusterID就可以了。然后打开VERSION，把namenode的。打开，记录namedode下的。

启动Hadoop后 jps 没有出现DataNode进程的解决方法

KingSuccesHou的博客

02-26

8482

一、出现问题的原因在启动Hadoop之前，进行了多次的格式化，导致DataNode的ID发生了变化。二、问题解决方法我们可以让NameNode的clusterID与DataNode的clusterID一致，这样就可以解决这个问题了。 1.首先去到你的hadoop目录下 2.在进入到 hadoop-2.8.1/tmp目录下 3.在进入到dfs中 ls 4.在进入到目录name中ls 5.在进入到current中ls 6.使用命令（vi或vim）打开VERSI..

Hadoop | 解决启动Hadoop，jps后无namenode,datanode等进程

热门推荐

martinniee

01-11

1万+

问题描述最近因为想修改一下主机名，用户名什么的但是一开始没有注意到主机名和用户名对于Hadoop服务的影响导致修改后，导致Hadoop启动，失败，即jps后，没有namenode,datanode，显然这两个文件对于hadoop是至关重要的，要不然无法获取数据一开始没有考虑查看日志排错(因为对于异常处理方面不敏感:???? 因为机缘巧合，碰巧试了试，然后就行了之所以出错，归根结底还是对于原理不熟解决方案首先要知道Linux下的主机名和用户名是什么，如何查看命令行终端下格式 : 用户名@主机

hadoop启动后jps进程没有Datanode进程的解决方法_jps没有datanode进程

2401_84167086的博客

04-17

703

2：我认为最有效的解决方法就是将虚拟机hadoop01，hadoop02，hadoop03的hadoop目录下的data文件rm -rf data删除，感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！2：可能是由于多次输入hdfs namenode -format格式化的原因，使其Datanode被覆盖了。1：重新一步一步检查配置文件，缺一不可，配置好后重新发布给其他两台虚拟机，再进行格式化。再重新发布给其他两台，格式化。

Hadoop | 解决启动Hadoop集群，DataNode不存在的问题

martinniee

01-10

4331

问题描述 1.使用 ./sbin/start-all.sh启动Hadoop集群，过程中DataNode没有启动 2.使用jps查看进程时，没有DataNode节点在此需注意Hadoop集群是如何搭建的本实验是使用(伪分布式) 1.Master节点其他节点在Master节点中 2.Slave节点 DataNode在Slave节点中可用方案网上可用方案，及其原因分析是原因1 多次格式化nameNode节点 (hadoop namenode -format),是NameNode和DataNod

hadoop3.0启动后jps没有进程

weixin_43588364的博客

01-08

2159

hdfs启动后,jps查询不到进程号

HADOOP 主节点启动了datanode但是从节点没有的解决办法（所有节点没有datanode也都适用）

weixin_58515213的博客

04-16

7968

HADOOP 主节点启动了datanode但是从节点没有的解决办法（所有节点没有datanode也都适用）

hadoop分布式集群启动，从节点datanode消失

weixin_45955747的博客

03-12

3223

datanode消失

启动hadoop集群全部服务时没有datanode服务

APguantou的博客

04-04

1789

我在安装时将hadoop安装在 /software/hadoop/hadoopducument/ 下，并将安装包改名为HADOOP。如图所示，开启时datanode可以正常开启，其它服务都正常，唯独没有datanode，关闭时显示。今天在启动hadoop集群时，开启全部服务后，用jps检测，发现没有datanode服务。1.编辑hadoop目录下的/etc/hadoop/core-site.xml。2.切换至上述查找到的路径中,并查看该目录下的内容。可能的原因是hadoop主节点格式化次数过多。

HDFS主节点DataNode正常启动但是从节点jps没有DataNode进程[已解决]

最新发布

haj6468的博客

04-17

1425

1.首先可能是权限问题，之前有不小心用root用户启动过Hadoop，所以得排查Hadoop，安装路径的权限是不是hadoop用户的。包括/data/dn /data/nm。③data/nn/current ，/data/dn/current下的VERSION文件的clusterID不一致！查看/etc/host 文件里面是否设置好了代理，和第一点的wokers文件是否一致，每个节点都得看看。2.权限问题排查之后，查看日志，一般在hadoop/logs文件夹下，每个节点都看一下。

启动Hadoop，没有DataNode节点

qq_45736175的博客

06-28

5650

1.其他节点，如namenode都成功启动了，就是DataNode没有启动原因是NameNode和DataNode的ID不一致导致的，因为我有一个坏习惯，就是每次关闭虚拟机时，都没有使用./sbin/stop-all.sh关闭Hadoop，而是直接关闭虚拟机了。 2.解决方法，找到name/current/目录下的VERSION文件，复制其clusterID 然后粘贴到data/current/VERSION文件中的clusterID 另一种知道NameNode的cluster..

Hadoop启动集群子节点没有DataNode节点解决方法

m0_58945994的博客

12-11

1万+

我在启动Hadoop集群的时候发现没有DataNode节点，于是我去查看了一下日志（日志在自己的hadoop目录下）：

Hadoop没有datanode节点解决

漫天雪_昆仑巅

06-19

1万+

Hadoop启动之后jps查看，[root@VM_0_3_centos hadoop]# jps23488 NameNode23746 SecondaryNameNode24100 Jps23959 ResourceManager24057 NodeManager9068 Bootstrap可以看到少了DataNode，出现这种问题的原因有很多，如下：1、nameNode进行format多次，导致...

hadoop jps后没有datanode

03-16

如果在运行Hadoop集群时，使用hadoop jps命令查看进程列表，但是没有看到datanode进程，可能有以下几种原因： 1. Datanode进程没有启动：可以使用hadoop-daemon.sh start datanode命令手动启动datanode进程。 2. Datanode进程启动失败：可以查看datanode的日志文件，通常在$HADOOP_HOME/logs目录下，查看是否有异常信息。 3. Datanode进程启动后又异常退出：可以查看datanode的日志文件，通常在$HADOOP_HOME/logs目录下，查看是否有异常信息。 4. Datanode进程所在的节点宕机或网络故障：可以检查datanode所在的节点是否正常运行，以及节点之间的网络是否正常。总之，如果没有看到datanode进程，需要先确定问题所在，然后采取相应的措施解决问题。