jps没有namenode和datanode原因

最新推荐文章于 2024-10-10 13:22:05 发布
最新推荐文章于 2024-10-10 13:22:05 发布
阅读量3.9k 收藏 27
点赞数 3
文章标签： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a18307096730/article/details/120751586
版权

 

重点：所有的原因都可以在hadoop下的logs目录下namenode的日志文件中找到问题所在，运行中的问题都会保存到这些文件中 

 

 这里总结几个主要问题

原因1

配置文件有问题

检查所有的hadoop配置文件，看是不是有遗漏或者不对的地方

原因2（很可能是这个问题）

节点在本机的路径有问题：日志文件中提示无法访问到你的namenode的路径

你如果使用的普通用户，你节点在本地的存放位置普通用户要得有权限，不然初始化的数据都不能够存放到指定位置

原因3

你之前多次格式化主节点，却没有删除，多次格式化namenode造成了namenode和datanode的clusterID不一致，它都不知道加载哪个了。

解决方法

删掉hadoop/logs日志文件中的所有日志文件，还有你namenode和datanode存放路径的所有文件信息，重新格式化

塞班呢
关注
Hadoop | 解决启动Hadoop，jps后无namenode,datanode等进程
martinniee
01-11 1万+
问题描述 最近因为想修改一下主机名，用户名什么的 但是一开始没有注意到主机名和用户名对于Hadoop服务的影响 导致修改后，导致Hadoop启动，失败，即jps后，没有namenode,datanode，显然这两个文件对于hadoop是至关重要的，要不然无法获取数据 一开始没有考虑查看日志排错(因为对于异常处理方面不敏感:???? 因为机缘巧合，碰巧试了试，然后就行了 之所以出错，归根结底还是对于原理不熟 解决方案 首先要知道Linux下的主机名和用户名是什么，如何查看 命令行终端下 格式 : 用户名@主机
Hadoop集群开启后使用jps命令查看发现没有NameNode、SecondaryNameNode、DataNode、NodeManager进程，缺少进程。
m0_74132943的博客
09-12 1709
今天安装Hadoop集群，安装完成使用jps命令查看发现没有NameNode、SecondaryNameNode、DataNode、NodeManager进程，别人jps后都有6个在跑，我就两个。重启服务...........................................................
在Hadoop设置中输入jps没有出现namenode和datanode
qq_64374683的博客
12-21 3594
可能是多次格式化NameNode后未删除相关文件，需要检查在hadoop中查看hdfs-site.xml和core-site.xml配置文件，确认其中的相关配置项是否正确设置，查看目录路径，然后删除相关文件。
hadoop namenode和datanode启动后，jps无namenode和datanode
最新发布
m0_62321216的博客
10-10 227
问题解决方法：删除hadoop的data和logs文件夹，重新格式化namenode。
处理--输入jps后没有datanode、namenode
VC_djx的博客
12-26 2565
用命令或者直接在文件中直接删除dfs目录下的data文件里的所有内容。应该能解决没有datanode和namenode问题。进入hadoop下的core-site.xml文件。一般是由于多次对namenode进行格式化导致。1.关键在于将相关的记录文件删除，重新格式化。修改之后重新加载环境并分发到其他节点。首先进行hadoop文件下（示例）进入到配置里查看记录文件的所在地。查看主节点的配置是否与主机匹配。猜测可能是由于环境配置错误（重新jps后应该就没问题了。第二节的配置也看一下。
hadoop启动后jps没有namenode
hpuyancy的专栏
10-13 3万+
Hadoop namenode无法启动 http://www.codesky.net/article/201208/171226.html 最近遇到了一个问题，执行start-all.sh的时候发现JPS一下namenode没有启动
jps命令没有namenode或datanode, 怎么解决？
热门推荐
missTu~的博客
11-26 4万+
1、为什么会出现这样的问题？ （1）直接关闭了虚拟机，没有停止hadoop的集群 （2）没有停止hadoop的集群，又重新启动集群 （3）格式化namenode之前，没有删除data里的数据和logs日志，造成导致NameNode和DataNode的集群id不一致的情况。 2、解决方法（一定要按顺序操作） （1）停止hadoop集群 stop-all.sh (2) 删除data数据和logs日志...
配置Hadoop实验环境 运行jps后未显示datanode或者namenode
zhangqianqian57的博客
11-11 7269
1.运行jps后未显示datenode 未显示datanode的原因一般都是多次格式化HDFS的原因：即多次执行hdfs namenode -format 的结果。多次格式化会使得name和date下的clusterID不一样。因为每次格式化后name下的clusterID都会被改变，但是data下的clusterID只会在第一次格式化的时候生成，再次格式化的时候其值不会改变。 解决方法：...
【问题解决】Hadoop集群启动后执行JPS没有DataNode或NameNode
午夜的行人
04-18 3万+
引言 最近在尝试在搭建Hadoop集群并测试集群是否搭建成功，但是第一次格式化NameNode并启动HDFS和YARN时发现一会儿有DataNode或者NameNode但是后面就没有了，二者没有同时存在，也尝试过停止进程再重新启动都没有解决掉该问题。 相关命令 集群第一次启动，格式化NameNode bin/hdfs namenode -format 启动HDFS sbin/start-dfs.sh 停止HDFS sbin/stop-dfs.sh 启动YARN sbin/start-yarn.sh
jps没有namenode和datanode
03-17
jps是一个命令行工具，用于查看Java进程状态。它不具有namenode和datanode这样的功能。 Namenode和datanode是Hadoop中的重要组件，分别负责管理文件系统的元数据和存储数据。
jps不出现datanode_从节点JPS没有dataNode的解决办法
weixin_39612228的博客
12-19 3941
从节点JPS没有dataNode的解决办法查看logs日志文件，找到Hadoop的安装目录下logs目录，用cat hadoop-root-datanode-localhost.localdomain.log进行日志查看1、java.net.BindException: 无法指定被请求的地址另一种错误表现方式是：执行hadoop fs -put命令报错could only be replicate...
Hadoop 执行jps后没有namenode和datanode
小透明-溶冰
03-13 4320
hadoop的配置是参考这篇教程的http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-single-node-cluster/ 初次配置运行没什么问题MapReduce的例子也能正常运行，但是等若干天后再次运行时遇到了如下的问题: hadoop@ubuntu:~$ hadoop/bin/start-all.s
Hadoop高可用集群搭建，jps查看进程，有时没有namenode，有时没有datanode
weixin_48437766的博客
04-07 3854
问题描述 Hadoop高可用集群搭建完成后，jps查看进程，有时没有namenode（这篇文章中解决了没有namenode），有时没有datanode 但是多次初始化namenode后造成datanode与namenode之间的id不一致，网上有很多教程解决这个问题大体思路是： 当我们执行文件系统格式化时，会在namenode数据文件夹（即配置文件中dfs.name.dir在本地系统的路径）中保存一个current/VERSION文件，记录namespaceID，标识了所格式化的 namenode的版
Hadoop启动后jps查询后没有namedata，datanode进程
whs0329的博客
10-31 2万+
我的namedata进程突然之间没有的原因：是因为我之前没有停止hadoopd的集群又重新启动hadoopde集群 还有其他原因也会导致比如：1.直接关闭虚拟机，也没有停止hadoop 集群 2.格式化namenode之前，没有删除data里面的数据和日志，导致 namenode和datanode的cl...
关于Hadoop启动之后jps没有namenode节点的解决方法
Guoxiang1030_的博客
11-01 3万+
安装完Hadoop集群的时候进行网页验证时发现并没有加载出来 检查ip地址是否是namenode所在节点的ip 发现ip地址对应上了，那我们运行一下jps，发现没有192.168.100.201这个节点下并没有namenode 这时候我运行停止所有命令，发现Hadoop01节点没有namenode可以停止 我怀疑问题出在了我多次格式化导致namenode启动不了 这时候就需要删除原目录，即...
Hadoop集群启动后命令JPS没有DataNode或者NameNode
qq_53953480的博客
03-22 8714
a:进入/opt/module/hadoop-3.1.3/data/dfs目录里面删除掉所有文件。c:进入/opt/module/hadoop-3.1.3/logs目录里面删除掉所有文件。1）需要检查core-site.xml 和 hdfs-site.xml这俩文件，配置没错的话再看第二条。2）可能已经执行格式化NameNode后，但是格式之前并没有停止之前的进程并删除相关数据。1）删除dfs文件夹里的文件和删除nm-local-dir目录。2）删除后需要重新执行格式化NameNode操作。
hadoop集群启动jps查看后没有DATANODE或NAMENODE
weixin_43837419的博客
11-21 1952
没有DATANODE 删除/usr/local/hadoop/tmp/dfs/data/current/VERSION文件后 ./sbin/start-dfs.sh即可 没有NAMENODE ./bin/hdfs namenode -format ./sbin/start-dfs.sh即可
Hadoop集群启动后，缺少namenode或datanode进程
y215204的博客
10-01 9314
简述：NameNode 是 HDFS 的主节点，是负责管理整个 HDFS 集群的，相当于一个团队的老大,若没有启动，则不会进入web界面等。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值