Yarn application has already ended! It might have been killed or unable to launch application master

九师兄

于 2020-07-04 11:41:45 发布

阅读量1.8k

点赞数

分类专栏：大数据-spark

本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。

本文链接：https://blog.csdn.net/qq_21383435/article/details/86359228

版权

大数据-spark 专栏收录该内容

204 篇文章 480 订阅 ¥49.90 ¥99.00

订阅专栏

本文介绍了在遇到Yarn应用程序提前结束的问题时，可能与JDK1.8版本存在兼容性问题。通过在yarn-site.xml中添加特定配置信息，成功解决了这一问题。

摘要由CSDN通过智能技术生成

1.美图

在这里插入图片描述

lcc@lcc spark-2.2.0-bin-hadoop2.7$ bin/spark-submit  --master yarn --executor-memory 512M --deploy-mode=client --class com.lcc.spark.structed.streaming.StructuredKafkaToMySQL2   /Users/lcc/IdeaProjects/SparkAllTest/structured_streaming/target/structured_streaming-1.0-SNAPSHOT-jar-with-dependencies.jar
Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties
19/01/12 14:06:47 WARN NativeCodeLoader: Unable to load native-hadoop library for your platform... using built