Spark 运行问题 java.lang.NoSuchMethodError 解决方案

一般情况,出现这种问题是因为scala和spark的版本不匹配,需要重新下载两者相匹配的版本。
File - Project Structure - Libraies - “+” - java
在这里插入图片描述
选择spark目录下jars文件夹
在这里插入图片描述
Maven项目,pom.xml文件中添加Spark依赖,需要联网下载,或者本地库中已经下载好依赖包
在这里插入图片描述

 <!-- 在properties中添加Spark版本 -->
  <properties>
    <spark.version>2.3.3</spark.version>
  </properties>
 
 
 <!-- 在dependencies中添加Spark组件 -->
  <dependencies>
    <!-- https://mvnrepository.com/artifact/org.apache.spark/spark-core -->
    <dependency>
      <groupId>org.apache.spark</groupId>
      <artifactId>spark-core_2.11</artifactId>
      <version>${spark.version}</version>
    </dependency>
    <!-- https://mvnrepository.com/artifact/org.apache.spark/spark-sql -->
    <dependency>
      <groupId>org.apache.spark</groupId>
      <artifactId>spark-sql_2.11</artifactId>
      <version>${spark.version}</version>
    </dependency>
    <!-- https://mvnrepository.com/artifact/org.apache.spark/spark-streaming -->
    <dependency>
      <groupId>org.apache.spark</groupId>
      <artifactId>spark-streaming_2.11</artifactId>
      <version>${spark.version}</version>
      <scope>provided</scope>
    </dependency>
  </dependencies>

但是当尝试了上面的操作还是无法解决问题时,请打开项目的iml文件,去掉不同版本的scala的orderEntry就能解决。

参考文章:
Spark 运行问题 java.lang.NoSuchMethodError: scala.Predef 解决方案
IDEA安装Spark

  • 0
    点赞
  • 0
    评论
  • 0
    收藏
  • 一键三连
    一键三连
  • 扫一扫,分享海报

©️2021 CSDN 皮肤主题: 数字20 设计师:CSDN官方博客 返回首页
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。

余额充值