sqoop 执行任务的时候 YARN异常YarnException:Failed while publishing entity的解决方案
1. 解决sqoop 慢的问题。 报错:YARN异常YarnException:Failed while publishing entity的解决方案
2.场景架构
基础平台架构是采用Ambari
mysql —> sqoop --> hdfs 的数据同步 在同步的过程中发现很慢数据量特别少的时候也特别的慢 任务都是在五分钟后才执行
3.看问题的过程
3.1. 查看yarn 的任务
3.2 通过Application ID 点击进去可以看到日志
3.3 看到日志错误
解决方案: 原
原创
2021-02-07 00:23:55 ·
1014 阅读 ·
0 评论