flink on yarn 任务提交出错，报AskTimeoutException和java.util.concurrent.CompletionException异常

最新推荐文章于 2024-12-10 09:50:19 发布

kangker

最新推荐文章于 2024-12-10 09:50:19 发布

阅读量6.1k

点赞数

分类专栏： Flink CDH 文章标签： flink on yarn CDH-5.15.0

本文链接：https://blog.csdn.net/weixin_43079984/article/details/88634706

版权

在CDH-5.15.0环境下，部署Flink 1.6.4 on YARN时遇到AskTimeoutException和CompletionException异常。通过检查发现JAVA_HOME指向了错误的JDK版本。解决方法包括：更新JDK到1.8.0-openjdk，或者通过Cloudera Manager修改Java主目录，重启相关服务后问题得到解决。

摘要由CSDN通过智能技术生成

部署flink on yarn时报错
任务提交命令：
/opt/module/flink-1.6.4/bin/yarn-session.sh -n 3 -s 6 -jm 1024 -tm 1024 -nm test -d
提交yarn-session成功
在这里插入图片描述

/opt/module/flink-1.6.4/bin/flink run -m yarn-cluster examples/batch/WordCount.jar
向yarn提交任务失败,log记录为

JAVA_HOME为/usr/java/jdk1.8.0_11

更换JDK版本为：JAVA_HOME为/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.201.b09-2.el7_6.x86_64/jre

重启cloudera-manager-agent和cloudera-manager-server 问题解决
或者通过cloudera-manager web页面修改java主目录
在这里插入图片描述
参考文章：https://blog.csdn.net/Yuan_CSDF/article/details/85020000