Exception in thread “main“ java.lang.NoSuchMethodError: org.apache.spark.ContextCleaner.registerSpar

最新推荐文章于 2024-04-05 15:56:54 发布

hzp666

最新推荐文章于 2024-04-05 15:56:54 发布

阅读量1.9k

点赞数 1

分类专栏： spark 文章标签： Spark 版本冲突 pom.xml 依赖管理统一版本

本文链接：https://blog.csdn.net/hzp666/article/details/122230952

版权

spark 专栏收录该内容

54 篇文章 9 订阅

订阅专栏

这种情况一般是 spark组件的版本不一致，我这里就是 spark-core 和sparkSQL 的版本不一致，

在pom.xml 中修改一直即可。

<dependency>
    <groupId>org.apache.spark</groupId>
    <artifactId>spark-core_2.12</artifactId>
    <version>3.0.3</version>
</dependency>

<dependency>
    <groupId>org.apache.spark</groupId>
    <artifactId>spark-sql_2.12</artifactId>
    <version>3.0.3</version>
</dependency>