部署impala后,启动hadoop时,datanode启动失败

在部署impala过程中,由于修改了hdfs-site.xml导致hadoop datanode启动失败。通过开启debug模式分析日志,发现错误与libhadoop加载失败有关,需要GLIBC_2.14版本。当前系统GLIBC版本为2.12,需升级到2.14来解决此问题。
摘要由CSDN通过智能技术生成

由于impala的配置文件是依赖于hadoop和hive的,所以在部署impala时,会在之前配置好的hadoop配置文件的基础上再进行修改。

本次报错主要体现在 修改了hdfs-site.xml

<property>

    <name>dfs.domain.socket.path</name>

    <value>/var/run/hdfs-sockets/dn</value>

</property>

配置后,启动hadoop,datanode启动失败,查看日志文件发现错误

WARN org.apache.hadoop.hdfs.server.datanode.DataNode: File descriptor passing is disabled because libhadoop cannot be loaded.

2022-03-20 16:59:53,115 FATAL org.apache.hadoop.hdfs.server.datanode.DataNode: Exception in secureMain
java.lang.RuntimeException: Although a UNIX domain socket path is configured as /var/lib/hadoop-hdfs/dn_socket, we cannot start a localDataXceiverServer because libhadoop cannot be loaded.

但是不知道具体的错误原因,故开启debug模式,查看具体报错的信息。

vi /etc/bashrc //我的环境变量都是在这个文件中,根据自身环境变量修改位置编辑
export HADOOP_ROOT_LOGGER=DEBUG,console   //添加这一行
source /etc/ba
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值