hadoop集群启动后datanode和namenodemanager关闭问题解决

在成功启动Hadoop集群后,有时datanode和nodemanager会意外关闭。检查配置文件如hdfs-site.xml、mapred-site.xml、yarn-site.xml和core-site.xml确保正确。若配置无误,可能是由于旧数据未清除导致。解决方法包括:关闭防火墙,删除dfs.namenode.name.dir、dfs.datanode.data.dir及hadoop.tmp.dir目录内容,然后重新启动并执行hadoop namenode -format。
摘要由CSDN通过智能技术生成

成功启动hadoop集群后,在matser机器上执行jps命令,可以看到:

 Jps
 ResourceManager
 NameNode
 SecondaryNameNode

在slave节点上可以看到:

 DataNode
 Jps
 NodeManager

但是有时候,在集群启动一段时间后,slave上的datanode和弄得manager会消失。解决办法如下:

1.首先检车自己的配置文件是不是正确,我的配置文件如下:

hdfs-site.xml
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>

<property>
<name>dfs.namenode.name.dir</name>
<value>file:/usr/hadoop/hdfs</value>
</property>

<property>
<name>dfs.datanode.data.dir</name>
<
  • 1
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值