Hadoop运行一段时间后无法stop-all.sh

最新推荐文章于 2022-03-17 01:49:05 发布
最新推荐文章于 2022-03-17 01:49:05 发布
阅读量673 收藏
点赞数
分类专栏： Hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/tiandd12/article/details/60754745
版权

这几天需要做 不同节点的查询试验，才发现不能关闭节点。百度一个一番之后。

解决方法;

修改 hadoop-env.sh 文件


export HADOOP_PID_DIR=/usr/software/hadoop-2.7.2/tmp


这里的文件名和路径可以自由设置。

在重启集群就好了


小田同学tdx
关注
专栏目录
2021年 全网最细大数据学习笔记（二）：Hadoop 伪分布式安装
Amo Xiang的博客
04-05 5835
文章目录一、Linux 操作系统的安装二、在 Ubuntu 20.04.2.0 中 进行 Hadoop 伪分布式安装1、Ubuntu 20.04.2.0 安装 jdk2、配置 SSH 无密码登录3、Hadoop 的下载与安装4、Hadoop 环境配置5、启动与关闭 Hadoop6、查看 Hadoop 的基本信息6.1、查看 HDFS Web 界面6.2、查看 YARN Web 界面三、在 Centos7 中 进行 Hadoop 伪分布式安装 一、Linux 操作系统的安装 2021年 全网最细 Windo
stop-all.sh无法停止hadoop集群
zhangxiaohui4445的博客
03-22 1758
1 问题：执行 stop-all.sh 脚本一直提示没有可停止的namenode、datanode、secondarynode。可是输入 jps 命令，发现hadoop 相关进行依旧存在。 提示消息如下： 这是检查hadoop功能依旧正常，能进行进行存储以及计算。 2 产生原因:stop-all.sh 执行的原理是根据mapred和dfs的进程号进行关闭进程的，而这些进程号默认是存储在/...
长时间未关闭hadoop集群导致stop-all.sh 失效
weixin_42768356的博客
12-06 1310
如果长时间未关闭hadoop集群，执行stop-all.sh命令会报错：no DataNode/NameNode to stop。 这是因为hadoop启动时的默认地址为：export HADOOP_PID_DIR=${HADOOP_PID_DIR} 即存放log的地址（/tmp），在启动时可以看到starting datanode, logging to /hadoop/hadoop-2.7.7...
stop-all.sh
梦想成真那天
07-11 1100
[root@master config]# stop-all.sh This script is Deprecated. Instead use stop-dfs.sh and stop-yarn.sh 17/07/11 09:51:10 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your plat
stop-all.sh 命令无法停止hadoop集群
zhoujianfeng3的专栏
08-05 7947
最近一直都在研究 Mahout算法，hadoop集群也没怎么改动；今天
bin/stop-all.sh无法停止服务
u014090536的专栏
03-26 2566
用stop-all.sh无法停止hadoop了，用jps看当前的进程，kill掉hadoop相关的进程即可。网上还有一种方法： http://blog.csdn.net/gavinming/article/details/4367711 在网上搜索了一圈，得知了问题所在：stop-all.sh会调用stop-mapred.sh和 stop-dfs.sh去停止jobtracker, task
无法停止hadoop集群（stop-all.sh）
heima201907的博客
11-04 1016
执行 ./bin/stop-all.sh 脚本一直提示没有可停止的namenode、datanode、secondarynode。可是输入 jps 命令，发现hadoop 已经启动。 [root@xxxxxx src]# bash hadoop-2.6.5/sbin/stop-all.sh This script is Deprecated. Instead use stop-dfs.sh an...
Hadoop集群启动，指令start-all.sh 但slave节点没有datanode
PJ填坑手记
05-30 4337
场景 在对集群进行启动时，使用指令start-all 但是slave节点上的datanode没有启动。 Expect Result： 在HadoopMaster终端上执行JPS指令，显示四个进程： 在HadoopSlave终端上执行JPS指令，显示三个进程： 而现在启动后，发现在HadoopSlave终端上只有2个进程： 原因 原因如网上所说，是因为进行了多次格式化指令： hdfs namenode -format 每次格式化都会重新你创建一个namenodeId，而在默认情况下tmp/dfs/dat
hadoop-2.6.4.tar.gz
05-17
8. **启动和脚本文件**：启动、停止Hadoop服务的脚本，如`start-dfs.sh`、`start-yarn.sh`和`stop-all.sh`。 为了部署和运行Hadoop 2.6.4，用户需要解压这个压缩包，根据其内部的文档配置环境，包括设置HDFS的存储...
Hadoop分布式集群环境的搭建（CentOS6.5-CentOS7.0）
weixin_45917085的博客
03-17 4569
Hadoop简单搭建 适合新手
完美解决Hadoop集群无法正常关闭的问题!
01-07
相信对于大部分的大数据初学者来说，一定遇见过hadoop集群无法正常关闭的情况。有时候当我们更改了hadoop内组件的配置文件后，必须要通过重启集群来使配置文件生效。         但往往一stop-all.sh,集群下方总会出现下面的提示： [root@master ~]# stop-dfs.sh Stopping namenodes on [master] master: no namenode to stop slave2: no datanode to stop slave1: no datanode to stop …         最开始的时候，我也是看了一个头两个大，这都是啥
hadoop stop-all.sh 报no namenode to stop等问题
weixin_50198333的博客
09-24 579
1.问题描述 长时间启动hadoop后，使用stop-all.sh停止时报 no namenode to stop，但jps显示namenode 确实存在 2.造成原因 hadoop默认配置是将namenode,datanode等相关进程的pid存放在/tmp目录下，但linux会定期清理/tmp目录，所以pid信息丢失，导致出现该问题 3.解决方法 修改hadoop/etc/hadoop/hadoop-env.sh文件中的HADOOP_PID_DIR # export HADOOP_PID_DIR=${H
stop-all.sh停止不了hadoop集群
sunqingok的博客
09-08 1675
Hadoop集群使用stop-all.sh停止时，停止不了，提示各个进程都找不到，但是各个进程都存在。 问题原因：hadoop启动停止都是通过hadoop-deamon.sh文件，脚本是通过pid文件来停止hadoop服务的。集群默认配置的pid文件位于/tmp目录下，linux系统默认每30天清理一次/tmp目录下的文件，pid文件丢失将导致无法正确关闭相应进程。 问题解决：由于pid文件已经无法找回，所以只能先用jps获取进程号，然后用kill -9杀掉对应进程，停止集群。参考stop-all.sh及
hadoop的stop-all失效原因及解决
softwarehe的专栏
11-28 4934
长时间运行hadoop之后，如果运行stop-all.sh，会发现有以下错误： no jobtracker to stop hadoop3: no tasktracker to stop hadoop2: no tasktracker to stop no namenode to stop hadoop2: no datanode to stop hadoop3: no datanod
Hadoop Shell基本操作
lemon1597的博客
10-28 1377
Hadoop Shell基本操作 任务目标 1.熟练掌握常用的hadoop shell命令 相关知识 调用文件系统(FS)Shell命令应使用 hadoop fs <args>的形式。 所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path。对HDFS文件系统，scheme是hdfs，对本地文件系统，scheme是file...
hadoop的stop-all无法关闭集群原因及解决方案
ForestCat的专栏
07-21 4734
在虚拟机中长时间运行hadoop之后，如果运行stop-all.sh，会发现： [root@node1 sbin]# stop-all.sh This script is Deprecated. Instead use stop-dfs.sh and stop-yarn.sh Stopping namenodes on [node1 node2] node1: no namenode to stop node2: no namenode to stop node2: no datanode to s..
/usr/local/hadoop-3.1.4/sbin/stop-all.sh
最新发布
05-25
这是一个停止 Hadoop 集群所有节点的脚本...stop-all.sh 脚本会停止所有的服务组件，包括 NameNode、DataNode、ResourceManager、NodeManager、JobHistoryServer 等。在执行该命令前，需要确保 Hadoop 集群已经启动。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值