hadoop入门1:ERROR Cannot set priority of datanode process

本文围绕部署hadoop-3.1.2启动hdfs时出现的错误展开。介绍了可能的原因,如core-site.xml配置错误、hadoop-env.sh环境变量配置问题,作者的问题是因配置HDFS_DATANODE_SECURE_USER=root导致。还提及错误后日志及正确现象。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

问题现象:

部署hadoop-3.1.2,启动hdfs时出现如下错误:

Starting datanodes
zglinux: ERROR: Cannot set priority of datanode process 2905

解决方案:

         此问题困扰了很久,百度上也搜不到,且是我已经在公司的环境下部署成功,回家后部署失败的情况下产生,甚是气恼。因而,解决后发誓写成此博,以警示后人。可能的方案:

  • core-site.xml配置错误

      core-site.xml是配置hadoop 组件hdfs(分布式文件系统的)的,此datanode即为hdfs中成员,因而可能由core-site.xml配置出错导致---我的不是;

  • hadoop-env.sh环境变量配置问题

     可能在环境变量中配置了HDFS_DATANODE_SECURE_USER=root,导致错误---我的就是这个原因,至于这个配置有撒用,暂时不知;至于当初为撒要配置这个,是因为网络中有“安装手册”贴了这个,可能也是我知其然不知其所以然导致......

# -------- for set priority if datanode process-----error
export HDFS_DATANODE_SECURE_USER=root

错误后日志:

         配置了以上环境变量并报错后,在hadoop的日志目录产生privileged-root-datanode-XXX.out文件,记录了datanode出错的原因,如下:

 

   小弟就是根据此对配置文件产生了怀疑+灵感,因而得出解决方案。

正确的现象:

         最后,贴出个正确结果,希望以此激励大家,有关hadoop的安装小弟就不多写了,网上一大堆-----谢谢。

 

评论 9
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值