升级Hadoop集群后，执行Hive SQL遇到错误，提示'Container killed on request. Exit code is 143'。问题源于mapreduce.map.memory.mb和map.reduce.memory.mb参数默认设置为1GB，不足以处理大数据量的表（1亿多条记录）。调整这两个参数至2G并重启后，SQL任务恢复正常。此问题表明升级集群后需确保适当配置资源参数。
升级hadoop集群后，跑hive sql发现任务一直报错跑不了。
在hive的cli界面执行sql，提示错误
ERROR: FAILED: Execution Error,return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
查看详细的日志，发现该job分发到4个节点执行，其中都报相同的错误，提示类似:
Current usage: 1GB of 1 GB physical memory used; 2.5 GB of 
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
