背景
只是一条INSERT语句插入一条数据,然后就报错
报错如下
Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask
分析
之前写过这个错误,这只是个表象错误,具体问题还是需要看日志分析。Z
正常日志里没有报错,在这个任务的一个POST日志文件中发现如下报错
Container container_e19_1577953713473_0001_01_000003 exited with diagnostics set to Container failed, exitCode=-105. Container killed by the ApplicationMaster.
Container killed on request. Exit code is 143
Container exited with a non-zero exit code 143
因某种原因通过度娘无法找到exitCode=-105的相关,只能找到Exit code is 143的相关问题。大部分都是在说是yarn的container分配的内存不够,需要进行yarn资源调整。但是详细的可以看到具体报错就是内存问题的报错,跟自己遇到的并不是同一种情况。
还是回过头来分析语句,因为是往特定的一个分区插数,且之前出现过分区丢失的情况,于是试一下换个分区插入数据,结果成功了。那么原因就找到了,原来分区映射存在问题也会导致这种错误,涨姿势了。修复该分区后,问题解决。