在Hadoop集群搭建搭建时，从属虚拟机slave01和slave02jps查看进程时，没有datanode的解决办法

最新推荐文章于 2023-12-19 06:30:00 发布
最新推荐文章于 2023-12-19 06:30:00 发布
阅读量4.8k 收藏 34
点赞数 8
文章标签： Hadoop集群出现的问题
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xh_1187466027/article/details/100750283
版权

刚开始一直没找出原因，原来是格式化语句 ：hdfs namenode -format执行了多次生成了一个current文件，去把每台虚拟机上的current文件删除了就可以了。

1、先根据图中的途径找到current文件；

2、然后再将它删除；

3、按照同样的方法切换到另外两台虚拟机将current文件删除。再去slave01和slave02上执行jps即可看到DataNode；

xh_陈冠
关注
搭建Hadoop时Slave节点没出现DateNode进程的原因
weixin_46128342的博客
04-06 8675
搭建Hadoop时Slave节点没出现DateNode进程的原因 正确的Hadoop下的Master、Slave节点jps后会出现 但当我关闭集群后重新用hdfs namenode -format进行文件格式后，重新启动集群， Slave节点却jps不到DataNone 原因：hdfs强制性多次初始化数据，会导致VERSION里面的nameid，clusterID，blockpoolID变化，...
jps不出现datanode_从节点JPS没有dataNode的解决办法
weixin_39612228的博客
12-19 3556
从节点JPS没有dataNode的解决办法查看logs日志文件，找到Hadoop的安装目录下logs目录，用cat hadoop-root-datanode-localhost.localdomain.log进行日志查看1、java.net.BindException: 无法指定被请求的地址另一种错误表现方式是：执行hadoop fs -put命令报错could only be replicate...
hadoop集群slave节点jps后没有datanode解决方案
dress
03-17 5201
3.切换到slave节点，将/usr/local/hadoop/tmp/dfs/data/current里的VERSION文件中的clusterID替换成与master的VERSION文件中clusterID一致。2.找到安装hadoop的文件夹，我的是(/usr/local/hadoop)再找到里面的tmp/dfs/name/current,打开VERSION查看并复制clusterID的内容。操作：在master里输入命令。操作：在slave里输入命令。
解决DataNode不能全部启动问题 org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for Block
perfer258的博客
08-05 5592
问题描述： FATAL org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for Block pool <registering> (Datanode Uuid unassigned) service to master/192.168.235.129:8020. Exiting. jav...
slave中datenode不能显示
彪锅锅来啦
07-09 1240
启动sbin/start-dfs.sh后，输入jps，master可以显示namenode，输入jps，slave中datenode不能显示时，把namanode和datenode下的logs,dfs,tmp文件都删除,然后重新格式化再启动(sbin/start-dfs.sh)。
启动Hadoop，没有DataNode节点
qq_45736175的博客
06-28 5679
1.其他节点，如namenode都成功启动了，就是DataNode没有启动 原因是NameNode和DataNode的ID不一致导致的，因为我有一个坏习惯，就是每次关闭虚拟机时，都没有使用./sbin/stop-all.sh关闭Hadoop，而是直接关闭虚拟机了。 2.解决方法，找到name/current/目录下的VERSION文件，复制其clusterID 然后粘贴到data/current/VERSION文件中的clusterID 另一种知道NameNode的cluster..
关于自搭建hadoop出现slave服务器没出现DataNode节点的解决方法
zg_feig01的博客
01-08 5423
首先先看正确hadoop下的master，slave服务器节点情况 异常情况：slave服务器未出现DataNode节点 问题描述： 一般是格式化hdfs出现的情况，例如hadoop namenode -format或 hdfs namenode -format 强制性多次初始化数据，导致 VERSION里面的nameid，clusterID，blockpoolID变化，导致m...
Hadoop | 解决启动Hadoop，jps后无namenode,datanode等进程
martinniee
01-11 1万+
问题描述 最近因为想修改一下主机名，用户名什么的 但是一开始没有注意到主机名和用户名对于Hadoop服务的影响 导致修改后，导致Hadoop启动，失败，即jps后，没有namenode,datanode，显然这两个文件对于hadoop是至关重要的，要不然无法获取数据 一开始没有考虑查看日志排错(因为对于异常处理方面不敏感:???? 因为机缘巧合，碰巧试了试，然后就行了 之所以出错，归根结底还是对于原理不熟 解决方案 首先要知道Linux下的主机名和用户名是什么，如何查看 命令行终端下 格式 : 用户名@主机
Hadoop | 解决启动Hadoop集群，DataNode不存在的问题
martinniee
01-10 4337
问题描述 1.使用 ./sbin/start-all.sh启动Hadoop集群，过程中DataNode没有启动 2.使用jps查看进程时，没有DataNode节点 在此需注意Hadoop集群是如何搭建的 本实验是使用(伪分布式) 1.Master节点 其他节点在Master节点中 2.Slave节点 DataNode在Slave节点中 可用方案 网上可用方案，及其原因分析是 原因1 多次格式化nameNode节点 (hadoop namenode -format),是NameNode和DataNod
Spark分布式集群搭建（一）Spark虚拟机集群搭建：Hadoop+Spark伪分布式集群（虚拟机）+IntellJIdea 的环境搭建
shine302的博客
04-21 676
环境搭建顺序：1）安装hadoop  2）在hadoop上安装Spark集群  3）IntellJIdea连接Spark集群写在前面：凡是涉及到的linux系统操作，建议以root用户权限进行工作准备工作共有两项：虚拟机配置+SSH服务安装准备工作1：虚拟机配置1.1  安装 VMware Workstation 12 player（虚拟机软件）1.2   在 VMware Workstation...
hadoop集群搭建和配置
m0_53876797的博客
05-20 1991
hadoop的优势是分布式集群计算，即搭建hadoop集群（完全分布式Hadoop）
启动集群之后没有datanode子节点进程，本来搭建好了，反复格式化之后，在slave子节点上jps查看进程发现没有datanode了，试过删除hadoop安装包里tmp文件夹中所有文件，还是不行
MUHUAAAAAA的博客
04-14 3177
hadoop环境搭建之namenode正常，datanode没启动
hadoop 集群开启之后datanode没有启动
热门推荐
BlueSky
03-16 1万+
datanode没有启动 将hadoop配置文件修改后，重新格式化了hadoop集群，即 hadoop name -format但是此时发现slave节点没有启动datanode 上网查找解决方法，最后终于解决了，解决方法如下： 1. 先执行stop-all.sh暂停所有服务 2. 将所有Salve节点上的tmp(即 hdfs-site.xml 中指定的 dfs.data.dir 文件夹
Hadoop3.x完全分布式模式下slaveDataNode节点未启动调整
最新发布
夜郎King的博客
12-19 9556
本文描述的是在Hadoop3.1.3的完全分布式环境下，slave节点的DataNode节点未能成功启动的问题以及通过修改配置来解决的办法，希望能帮助到遇到这个问题的朋友。
Hadoop集群搭建开启后，VMware中slave1，slave2的datanode显示开启，50070网站中live node只存在一个 解决方法
weixin_41695484的博客
05-10 896
问题描述： 用SecureCTR连接的VMware中显示slave1，slave2的datanode都开启，显示如下图： 50070网站中live node显示为1，在datanodes里刷新salve1和slave2随机显示。 解决办法： 先停止Hadoop集群(stop-all.sh)，删除master，slave1，slave2的name和data目录(/usr/local/apps/hadoop/下)，并在master上 hdfs namenode –format，然后再启动hadoop(st
spark的slave上没有datanode 的解决办法
make_APP的博客
01-27 5686
问题描述： 通过jps命令 发现 两个slave上都没有datanode，而master上正常 找到namenode和datanode各自的VERSION，发现master下的更新日期为1月27，slave下为12月25 分别查看master和slave日志发现果然有warn 解决办法： 1、停止服务，停止spark的和hadoop的，有stop-all.sh 2、找到哪台的s
针对启动hadoop后， 再启动spark ， slave节点datanode消失问题
qq_38332881的博客
03-30 497
Master启动后 ，slave1和slave2 DataNode节点没有启动的问题 先停掉hadoop /usr/local/src/hadoop-2.6.5/sbin/stop-all.sh master节点和slave1， salve2节点上 下面3个文件下清空 注意： 三个节点同时清空，不然白费 mkdir /usr/local/src/hadoop-2.6.5/tm...
关于hadoop集群开启后，datanode为0个，找不到datanode的解决方法
weixin_54628931的博客
03-26 4136
这个问题也卡住我好几天，通过百度和自己摸索，最终找到问题的答案，如果有不对的地方，请大神们批评指正。 相信各位已经配置好了hdfs-site.xml文件，也运行过hdfs namenode -format命令，但是还是没有找到datanode。可以尝试以下步骤： （1）进入到vi /opt/rh/hadoop-3.2.2/etc/hadoop/hdfs-site.xml 打开这个配置文件，查看你的name和data文件夹的地方。 随后进入到这两个文件夹下，使用rm -rf *命令删除文件夹...
hadoop slave节点无法启动datanode数据节点进程，但是master节点datanode正常启动
zhangyuhaifa的专栏
08-26 2218
按照Docker创建的集群下使用ansible部署hadoop教程，使用最新版本的hadoop3.0以后版本，一直出现mater节点正常启动，也包括datanode节点。查阅网上很多资料都是反应多次格式化引起。但是发现slave节点根本没有出现那些目录。所以心中一直有这个疑虑。当然也跳过很多坑！困扰我整整一个星期。 报着不解决问题死不休的心态，终于在茫茫问题解决贴中找到答案 传送门：hadoop错误- slave节点无法启动data node数据节点进程，但是master节点datanode正常启动
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值