hadoop集群启动的一些小错误

最新推荐文章于 2022-08-23 11:04:06 发布
最新推荐文章于 2022-08-23 11:04:06 发布
阅读量263 收藏
点赞数
分类专栏： hadoop集群 文章标签： hadoop 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yi_two/article/details/108177076
版权

① process information unavailable
通过jps命令查看hadoop状态后发现

-- process information unavailable

运行以下代码

rm -rf /tmp/hsperfdata_*

重启各个组件，就能解决问题
造成原因：意外关闭机器，或者没有按照顺序关闭各个组件。

② 格式化多次
把hadoop260下的dfs和logs删除后重新格式化

藏兔
关注
专栏目录
记录一下hadoop集群启动后，jps查看无namenode的解决办法
weixin_43329173的博客
08-19 3138
1、百度之前，我先到hadoop的logs目录下看了今天的日志， 首先百度了一番，基本上都是namenode format，但真的不想重做一遍数据，不死心的继续寻找。。。 找到了这个解答 https://my.oschina.net/dreamness/blog/3083130 啥意思啊？不懂。 ...
[零基础]用docker搭建Hadoop集群
weixin_56114243的博客
11-21 1万+
[零基础]用docker搭建Hadoop集群，每一步都有详细的解释！
hadoop 常见错误
junshao90的专栏
10-18 660
转自：http://my.oschina.net/u/248570/blog/42614 （一）启动hadoop集群时易出现的错误： 1.   错误现象：java.net.NoRouteToHostException: No route to host.    原因：master服务器上的防火墙没有关闭。    解决方法: 在master上关闭防火墙
hadoop启动集群前格式化操作
03-22
格式化操作。格式化操作。格式化操格式化操作。
Hadoop 2.6.4集群启动报错java.io.IOException: All specified directories are fail
chunguang.yao的博客
05-26 336
之前在自己本地的电脑上安装了3个linux机器来搭建hadoop集群，前面一段时间是使用三台来进行练习，后面发现电脑内容有点紧，就切换为两台。最近给电脑加了内存之后，就想把三台一起启动了。但是发现之前一直没用的那台没能起来，就去查看日志。 到mini3机器的日志目录，查看日志： 由错误日志可以看出来是当前机器的集群id和nameNode的集群id不相同，导致该节点无法加入集群 ...
Hadoop集群出现的错误1
haojieji的博客
05-27 93
在做集群时不小心没有把master名字改为haoop01，而且连续将错误语句enter两次，因此在把名字改回来之后，还是出现以下错误。 用了好多csdn上的方法还是错误。 后来我重新写入之前（以下）的代码 就可以了 ...
hadoop集群启动常见异常
二师兄撒欢之地
05-28 1万+
1、hadoop节点的本地工作目录访问异常（权限）2、namenode处于安全模式，导致无法上传数据namenode在刚刚启动的时候处于安全模式不一定是异常，但是如果启动完成之后一直不退出安全模式，就有问题，可以用以下指令尝试手动退出 hdfs namenode -safemode leave 如果退出不成功，可以查看日志信息或者关闭重启3、start-dfs.sh后，直接上传文件，发现上...
Hadoop集群启动常见异常
侠客小虎的博客
04-08 1115
1、hadoop节点的本地工作目录访问异常（权限） sudo chown -R administor:administor dfs/ 2、namenode处于安全模式，导致无法上传数据 namenode在刚刚启动的时候处于安全模式不一定是异常，但是如果启动完成 之后一直不退出安全模式，就有问题，可以用以下指令尝试手动退出     hdfs namenode -safemode
hadoop集群一键启动、关闭
10-15
总之，通过自定义脚本实现Hadoop集群的一键启动、关闭功能，不仅可以简化集群管理，提高运维效率，还能减少人为错误，确保集群的稳定运行。然而，理解这些操作背后的原理和技术细节至关重要，这对于维护大型分布式...
hadoop集群启动失败
最新发布
05-19
Hadoop集群启动失败可能有多种原因，下面给出一些常见的...如果以上方法都不能解决问题，可以查看Hadoop集群启动时生成的日志文件，查找错误信息并进行排查。 希望以上方法能够帮助您解决Hadoop集群启动失败的问题。
启动hadoop集群时遇到的问题
弦断的马丁的博客
03-19 126
老是报这个问题，但是集群是可以正常启动的。 暂时不知道为啥
jps -- process information unavailable-hadoop集群错误
执笔的博客
07-01 486
之前集群正常，装了个MySQL后，jps就变成了这样了，我试了许多方法，就这个对我有用，特此记录，防止日后类似问题。 错误： 之前的： 解决： （1）首先删除 /tmp/下的 hsperfdata_用户名 文件，我的是hsperfdata_root，参考以下博客。 原文链接：https://blog.csdn.net/qq_42385284/article/details/89503773 （2）重新启动hadoop。 提示进程还在运行。 （3）关闭集群，再重新启动 .
hadoop在启动时报错如何定位到错误
yinbucheng的博客
04-30 454
在hadoop目录下有个logs目录里面会记录你的操作日志。 比如我是root用户在进行 journalnode失败 我查看的日志是 less hadoop-root-journalnode-hadoop5.log
查看进程时，遇到process information unavailable的解决方法
JiaXingNashishua的博客
08-23 626
查看以hsperfdata_开头的目录，进入可疑的目录查看，比如说我现在kill了一个namenode的进程，然后出现了上诉问题，这时候，我就可疑进入到hsperfdata_hdfs目录查看。不同账号之间kill进程时，可能会造成这种现象（比如在axing用户启动了一个进程，但是用root用户去kill，虽然杀掉了，但是查看进程时偶尔就会出现）知道与上述端口相同的文件，然后rm -rf 删除这个文件。最后查看进程，就发现这个语句没有了。cd /tmp,进入系统目录。
已解决:XXXX -- process information unavailable
qq_43408367的博客
08-04 3055
今天遇到了昨天的遇到TCP问题，但是我昨天已经处理过了，结果今天又不行了，查了一圈，发现了一个异常，jps之后，还是有一个process information unavailable，重启过后还是存在，本来想着直接执行。快速清除掉这个残留进程。最后，放弃了，因为Hadoop集群还在运行，所以，最后决定还是翻一下/tmp进去单独清理一下。...
hadoop环境服务修复及hive整合
qq_38075749的博客
11-03 1150
hadoop环境服务修复 还没上班就看群里说园区断电，然后就有服务器断电后 启动hadoop集群服务显示 （大多数原因是某个组件崩了） -- process information unavailable 运行以下命令 rm -rf /tmp/hsperfdata_* 然后重启服务 在一键启动hadoop后（./start-all.sh ），服务没起来，额，似乎没啥用 emm 服务关闭 后 在重新启动后 发现 没有namenode 那就查看日志 和昨天晚上 的错误 如出一辙 ，na
解决 process information unavailable 问题
Erik_ly的博客
05-05 9833
本文主要介绍处理进程为 `process information unavailable` 的方法。
一个rm -rf *命令执行后， 整个人都不好了
热门推荐
认知 行动 坚持
12-10 3万+
刚才， 执行了rm -rf *， 然后整个人都不好了， 即使定义了 alias rm='rm -i'也没有任何提示（因为有f）， 平时还是尽量禁止使用rm -rf 吧。 必要用的时候， 再用。        如果定义了alias rm='rm -i'，  用rm -r *的时候， 是会有提示的。        害得让我重装系统， 哎。        建议：        1
CDH学习问题总结
weixin_42059968的博客
05-13 352
CDH学习问题总结 1.Cloudera Manager进不去 运行jps命令发现存在-- process information unavailable 在Linux下执行 jps 是快速查看Java程序进程的命令，一般情况下hadoop，hbase，storm等进程都是通过jps查看，有些时候因为进程没有被正常结束，比如资源占用过大时挂掉或者没有结束进程就直接重启计算机，会导致原有进程变为-- process information unavailable这样的空值，有时候不用管它，一段时间后会自动消失
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值