Hive运行Tez引擎任务出现always pending

最新推荐文章于 2023-02-09 09:30:00 发布

weixin_34293246

最新推荐文章于 2023-02-09 09:30:00 发布

阅读量1.5k

点赞数 1

文章标签：大数据 ui python

原文链接：https://my.oschina.net/yulongblog/blog/749843

版权

2019独角兽企业重金招聘Python工程师标准>>>

问题描述

在Hive中使用Tez计算引擎执行SQL任务时，Map和Reduce都处于Pending状态。

输入图片说明

解决思路

查看任务的ApplicationMaster的container日志如下：

2016-09-13 17:14:52,103 [INFO] [DelayedContainerManager] |rm.YarnTaskSchedulerService|: Releasing held container as either there are pending but  unmatched requests or this is not a session, containerId=container_e14_1473755328049_0004_01_000002, pendingTasks=1, isSession=true. isNew=true
2016-09-13 17:14:52,350 [WARN] [AMRM Callback Handler Thread] |rm.YarnTaskSchedulerService|: Held container expe