Container exited with a non-zero exit code 1 Failing this attempt. Failing the application.

最近在使用spark on yarn模式提交任务,下面是我测试的案例

--提交命令

spark-submit --master yarn-cluster --class com.htlx.sage.bigdata.spark.etl.Application --driver-memory 1g --num-executors 2 --executor-memory 2g --executor-cores 2  my-spark-etl_2.11-1.0-SNAPSHOT.jar 

--运行后报的错误是


--对这个错误很是郁闷,上网查说是配置问题,可是我运行其他代码就没问题,再说我在搭建集群的时候很是研究了一番,集群不会出现错误,所以我只能去yarn的运行日志中,在yarn的日志中也没有发现什么只有上面这个错误,然后我又去运行该程序的日志中找




-- 查看stderr文件,发现是找不到com/typesafe/scalalogging/Logger

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
根据提供的引用内容,"container exited with a non-zero exit code 239. Error file: prelaunch.err" 是一个错误信息,表示容器以非零退出代码239退出,并且错误文件为prelaunch.err。这通常意味着在容器运行过程中发生了错误。 要解决这个问题,可以尝试以下几个步骤: 1. 检查错误文件:prelaunch.err是一个错误文件,其中可能包含有关容器退出的更多详细信息。你可以查看该文件以了解更多信息,例如具体的错误消息或异常堆栈跟踪。 2. 检查日志文件:除了prelaunch.err之外,还应该检查其他日志文件,例如应用程序的日志文件或容器管理器的日志文件。这些日志文件可能包含有关容器退出的更多信息,帮助你确定问题的根本原因。 3. 检查资源限制:容器退出的原因可能是由于资源限制导致的。你可以检查容器的资源配置,例如内存限制、CPU限制等,确保它们足够满足应用程序的需求。 4. 检查应用程序配置:容器退出的原因可能与应用程序的配置有关。你可以检查应用程序的配置文件,确保它们正确设置,并且没有任何错误或冲突。 5. 检查依赖项:容器退出的原因可能是由于缺少或错误的依赖项导致的。你可以检查应用程序的依赖项,确保它们正确安装并且与应用程序兼容。 6. 检查网络连接:容器退出的原因可能与网络连接有关。你可以检查网络连接是否正常,并确保容器可以访问所需的资源和服务。 请注意,以上步骤仅为一般性建议,具体解决方法可能因环境和具体情况而异。如果以上步骤无法解决问题,建议查阅相关文档或寻求专业支持以获取更详细的帮助。
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值