在Ubuntu 16上使用Spark 2.3.3遇到Standalone模式下应用被杀死的问题，错误信息为'All masters are unresponsive!'。通过检查配置文件、启动命令及Maven项目的依赖，发现可能是Spark版本与编程依赖包不一致导致。更新依赖为Spark 2.3.3后，程序成功运行。
环境： Ubuntu 16 spark 2.3.3 jdk1.8 hadoop 2.7
使用spark standalone mode 部署spark，参考： http://spark.apache.org/docs/latest/spark-standalone.html
配置文件： ${SPARK_HOME}/conf 创建spaek-env.sh文件
在${SPARK_HOME}/sbin下开启 ./spark-master.sh ./spark-slave.sh spark://hot:7077
使用 ${SPARK_HOME}/bin/spark-submit --class xxx --master xxx /path/to/jar 可以正常执行
创建maven工程：
编程上图代码运行：出现如下错误：
ERROR StandaloneSchedulerBackend: Application has been killed. Reason: All masters are unresponsive! Giving up.
日志中的错误如下：
最低0.47元/天 解锁文章
扫一扫
920
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
