MapReduce FAILED Error: java.lang.RuntimeException: PipeMapRed.waitOutputThreads(): subprocess
MapReduce任务报错 FAILED Error: java.lang.RuntimeException: PipeMapRed.waitOutputThreads(): subprocess failed with code 1在跑MapReduce任务时,遇到过几次这样的错误,现整理已经踩过的坑大部分情况报这个错的原因是:使用的udf文件脚本本身有问题,避免踩坑的方法也很简单,线下单独跑一边脚本即可udf脚本没问题,问题出在脚本中需要调用配置文件,但是在MapReduce中未添加该文件名。
原创
2020-08-06 13:00:16 ·
642 阅读 ·
0 评论