IDEA 运行hql 出现FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTas

IDEA 运行hql 出现FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask. User: xxx is not allowed to impersonate xxx 的错误

根据报错日志 知 xxx用户无法模拟其他用户的身份访问 Hadoop集群。

启用的hiveserver2 的模拟用户功能 ,依赖于Hadoop 提供的proxy user(代理用户功能),只有Hadoop中的代理用户才能模拟其他用户身份访问 Hadoop集群。 因此,需要将hiverserver2 的启动用户设置为 Hadoop 的代理用户
修改hadoop 配置文件 core-site.xml

[xxx@hadoop102 hadoop-3.1.3]$ vim ./etc/hadoop/core-site.xml 

添加如下配置

<!-- 整合hive 用户代理设置 -->
<!--配置所有节点的xxx用户都可作为代理用户-->
<property> 
  <name>hadoop.proxyuser.xxx.hosts</name>
  <value>*</value>
</property> 
<!--配置xxx用户能够代理的用户组为任意组-->
<property>
  <name>hadoop.proxyuser.xxx.groups</name>
  <value>*</value> 
</property>
<!--配置xxx用户能够代理的用户为任意用户-->
<property>
  <name>hadoop.proxyuser.xxx.users</name>
  <value>*</value> 
</property> 

重启Hadoop 以及Hive

[xxx@hadoop102 hadoop-3.1.3]$ ./sbin/stop-dfs.sh
[xxx@hadoop100 hadoop-3.1.3]$ ./sbin/stop-yarn.sh
[xxx@hadoop102 hadoop-3.1.3]$ ./sbin/start-dfs.sh
[xxx@hadoop100 hadoop-3.1.3]$ ./sbin/start-yarn.sh
[xxx@hadoop102 hive]$ jps
10342 RunJar
10726 RunJar
2631 DataNode
6472 NodeManager
2217 NameNode
127468 Jps
[xxx@hadoop102 hive]$ kill -9 10342 10726
[xxx@hadoop102 hive]$ nohup ./bin/hive --service metastore &
[xxx@hadoop102 hive]$ nohup ./bin/hive --service hiveserver2 &

再次运行hql 不再报错。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值