![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
error
Hikigaya-Hachiman
这个作者很懒,什么都没留下…
展开
-
运行sparksubmit出现java.lang.NoClassDefFoundError: scala/collection/GenTraversableOnce$class
当我运行sparksubmit提交任务的时候报了这个scala/collection/GenTraversableOnce$class的错误.后来进行网上查看说是依赖包中存在与scala版本不匹配的依赖包然后我去maven当中查看,确实是有一个依赖的版本不一样<dependency> <groupId>org.apache.spark</groupId>...原创 2018-03-07 10:44:11 · 6108 阅读 · 0 评论 -
关于maven中的<scope></scope>
maven中的<scope>provided</scope>是为了解决冲突的.因此如果某个依赖加了scope的话,在打包的时候这个依赖就不会打进jar包中.原创 2018-03-07 11:00:56 · 1386 阅读 · 0 评论 -
提交spark的代码的时候出现Exception in thread "main" org.apache.SparkException:Yarn application has already end
出现的具体错误是:Exception in thread "main" org.apache.SparkException:Yarn application has already ended! It might have been killed or unable to launch application master.我最开始运行的是client模式出现了Spark的任务无法提交的情况.之后...原创 2018-03-06 17:08:32 · 7174 阅读 · 0 评论