Idea编写Spark运行报错(spark scala版本不一致)

最新推荐文章于 2024-04-23 15:48:03 发布

今天的砖很烫手

最新推荐文章于 2024-04-23 15:48:03 发布

阅读量2k

点赞数 2

分类专栏： spark报错文章标签： spark报错 spark scala版本不一致

本文链接：https://blog.csdn.net/weixin_43125677/article/details/98321921

版权

spark报错专栏收录该内容

3 篇文章 0 订阅

订阅专栏

Idea编写Spark运行报错

报错信息

Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.$conforms()Lscala/Predef$$less$colon$less;
at org.apache.spark.util.Utils$.getSystemProperties(Utils.scala:1632)
at org.apache.spark.SparkConf.loadFromSystemProperties(SparkConf.scala:65)
at org.apache.spark.SparkConf.<init>(SparkConf.scala:60)
at org.apache.spark.SparkConf.<init>(SparkConf.scala:55)
at Main$.main(Main.scala:26)
at Main.main(Main.scala)

原因 : spark和scala的版本不对应
解决 1: Maven库找spark对应的scala版本 , 添加到pom.xml
解决2 : Idea下载对应的Scala
注意事项 : SDK 和 pom.xml只需要添加一个 , 同时 , 需要检查Project Settings --> Libraries和Modules是否还存在就得Scala
重新测试