hive报错FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

问题一:FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

在这里插入图片描述

解决方法

(1)查看NameNode所在节点的内存
在这里插入图片描述
(2)查看yarn-site.xml中的如下两个参数

yarn.nodemanager.resource.memory-mb#Yarn可使用的物理内存总量,该值不能大于节点的内存
yarn.scheduler.maximum-allocation-mb#单个任务可申请的物理内存

问题二 开启Hadoop集群运行官网的案例,出现

Container exited with a non-zero exit code 1. Error file:
prelaunch.err. Last 4096 bytes of prelaunch.err : Last 4096 bytes of
stderr : log4j:WARN No appenders could be found for logger
(org.apache.hadoop.mapreduce.v2.app.MRAppMaster). log4j:WARN Please
initialize the log4j system properly.

解决方案

在mapred-site.xml文件中增加如下配置

在这里插入图片描述
注意:$HADOOP_HOME需要改写成实际hadoop安装的绝对路径

问题三 Can’t handle this event at current state

ERROR
org.apache.hadoop.yarn.server.resourcemanager.rmapp.attempt.RMAppAttemptImpl:
Can’t handle this event at current state
org.apache.hadoop.yarn.state.InvalidStateTransitonException: Invalid
event: REGISTERED at ALLOCATED

解决方案

修改hdoop.env.sh两个参数JAVA_HOME和HADOOP_CONF_DIR

最终成功了
在这里插入图片描述
总结:日志是个好东西,路径好配好,要学会看日志,解决问题就靠日志了

  • 7
    点赞
  • 18
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值