java.lang.NoSuchMethodError: scala.runtime.ObjectRef.create(Ljava/lang/Object;)Lscala/runtime/Object

最新推荐文章于 2021-01-03 19:43:25 发布
最新推荐文章于 2021-01-03 19:43:25 发布
阅读量2.6k 收藏 1
点赞数
分类专栏： Spark Scala 文章标签： spark scala
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/B11050101/article/details/82972807
版权

在使用spark进行开发时，本地运行成功，但是上传到集群发生如下错误：

java.lang.NoSuchMethodError: scala.runtime.ObjectRef.create(Ljava/lang/Object;)Lscala/runtime/ObjectRef;


此问题是由于本地编译时用到的scala版本和Spark集群所用Scala版本不一致导致的，可以通过修改本地scala版本号进行解决。

打开Spark Job监控页面，默认端口是4040，点击environment，可以查看到scala版本，如图所示。

可以发现，集群所用版本为2.10.5，而本地编译时使用的是2.11.7，所以修改本地scala版本，然后rebuild，提交集群运行，成功！

念雅小轩
关注
专栏目录
报错java.lang.NoSuchMethodError: org.json.JSONObject.put(Ljava/lang/String；Ljava/util/Collection...
邓邓子的博客
08-18 875
代码】报错java.lang.NoSuchMethodError: org.json.JSONObject.put(Ljava/lang/String;
【BugFix】java.lang.NoSuchMethodError: java.nio.ByteBuffer.position(I)Ljava/nio/ByteBuffer；
Badme
10-20 1987
【BugFix】java.lang.NoSuchMethodError: java.nio.ByteBuffer.position(I)Ljava/nio/ByteBuffer;
java.lang.NoSuchMethodError: scala.runtime.ObjectRef.create(Ljava/lang/Object；)Lscala/runtime/Object
bats的博客
01-03 422
Spark运行Scala程序报错 ：java.lang.NoSuchMethodError: scala.runtime.ObjectRef.create(Ljava/lang/Object;)Lscala/runtime/ObjectRef; 参考链接 该错误的原因在于 本地编译时用到的scala版本 和 Spark集群所用Scala 版本不一致导致的，可以修改本地的Scala版本即可。 为确定Spark集群所用到的Scala版本，可以在命令台通过spark-shell命令，可以得到下面结果： 可以使用
【scala】Exception in thread "main" java.lang.NoSuchMethodError: scala.runtime
voidfaceless的博客
11-27 836
报错Exception in thread “main” java.lang.NoSuchMethodError: scala.runtime. ObjectRef.create (Ljava/lang/Object;) Lcala/runtime/ObjectRef; 原因 是因为你使用的依赖包中的scala版本和运行环境中的scala版本不一致。查看依赖的包的scala版本，统一即可。 ...
java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;)[Ljava/lang/Object;
Nice的博客
05-09 5083
运行Flink程序报错： java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;)[Ljava/lang/Object; at com.ruozedata.bigdata.SocketWCApp$.$anonfun$main$1(SocketWCApp.scala:33) at com.ruozedata.bigdata.SocketWCApp$.$anonfun$main$1$adapted(SocketWC
出现 java.lang.NoSuchMethodError 错误的原因及解决方法
热门推荐
CG国斌的博客
01-13 11万+
在项目依赖比较复杂或者Java运行的环境有问题时，或者同一类型的jar包有不同版本存在，都可能触发该错误。本质上说是JVM找不到某个类的特定方法，也就是说JVM加载了错误版本的类。说白了，就是JVM找不到真正想要调用的方法啦！出现该错误的情形主要有以下两个种：（1）引用了不匹配的包版本； （2）开发环境和运行环境不一致。
解决 java.lang.NoSuchMethodError的错误
08-30
解决 java.lang.NoSuchMethodError 的错误 Java.lang.NoSuchMethodError 错误是一种常见的 Java 异常，它发生在 Java 虚拟机 (JVM) 无法找到某个类的特定方法时。这种错误可能是由于项目依赖比较复杂、Java 运行...
解决启动Azkaban报错问题：java.lang.NoSuchMethodError: com.google.common.collect.ImmutableMap.toImmutableMap
10-15
在Java编程中，`NoSuchMethodError` 是一个常见的运行时异常，它表示在类加载时找到了该类，但在该类中却找不到特定方法的定义。这个问题通常发生在不同版本的库之间存在不兼容的情况，即在编译时使用的库版本包含了...
java.lang.NoSuchMethodError异常处理要点.doc
06-09
在Java编程中，`java.lang.NoSuchMethodError`异常是一个运行时异常，通常发生在程序试图执行一个不存在的方法时。这个异常的出现通常意味着编译时和运行时的类版本不匹配，或者是在编译期间存在而运行时不存在的...
spark程序踩过的坑
3stoneBrother
01-10 3045
1、本地运行成功，但是上传到服务器上产生了如下错误： Exception in thread "main" java.lang.NoSuchMethodError: scala.runtime. ObjectRef.create (Ljava/lang/Object;) Lcala/runtime/ObjectRef; 此类问题往往是由于本地编译scala程序的scala版本和服务器上的版
Scala学习笔记--基础知识-变量、函数、柯里化、可变长度参数
a18792721831的博客
02-04 354
Scala学习笔记1.变量1.1.scala编译的内部类是单例模式，采用饿汉式的创建方式1.2.scala编译后，内部类中所有的变量都是final修饰的。1.3.scala元组最多放22个值1.4.元组存储都是以Object存储1.5.scala中声明的同时进行初始化最优1.6.scala for(a <- 0 to n) <- 语法糖2.函数 1.变量 变量分为可变变量和不可变变...
Scala
涵死的博客
11-27 1万+
一 Scala安装与配置 1 安装 2 配置IDEA 二 Scala基础 1 Hello Scala 11 IDEA运行HelloScala程序 12 控制台运行HelloScala程序 2 声明值和变量 3 常用类型 31 常用类型介绍 32 常用类型结构图 4 算数操作符重载 5 调用函数与方法 6 option类型 三 控制结构和函数 1 if else表达式 2 w
Spark中常见问题
lming_08技术博客
05-24 7642
Exception in thread “main” org.apache.hadoop.mapred.InvalidInputException: Input path does not exist: hdfs://argo/data/resys/mingliang/shop_diary/sparktest/WordCount/input.dat at org.apache.ha
Spark java.lang.NoSuchMethodError: scala.Predef$.refArrayOps
数据之路-忆梦前程
08-22 2441
1.问题 2. spark运行的scala版本是有限制 提示 with scala 2.10 support 下载对应版本的scala，然后重新编译jar包
IDEA spark 中scala的编译版本问题解决NoSuchMethodError （jvm ）
段智华的博客
05-04 2万+
Spark IDEA集成环境开发时，pom文件新安装了一些jar包，没注意到其中scala的版本被替换了，运行一个测试程序提示这个：Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;)Lscala/collection/mutable/ArrayO
scala单元测试“NoSuchMethodError”的解决办法
甘焕的博客
09-26 5149
在scala 2.12.3版本的单元测试中，严格按照ScalaTest的安装步骤，结果在运行单元测试时，提示如下错误：java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;)Lscala/collection/mutable/ArrayOps; at org.scalatest.tools.Args
Ljava.lang.Object;@ba8a1dc的问题
weixin_30508309的博客
10-30 150
代码： 可以顺利通过编译，但结果输出 原因：java的Object数组不能转换成为String[]数组，说明要转换的数组它本身是Object类型的，但是要把它转换为String类的数组，这是错误的。在遇到类型转换出错的时候，首先要观察被转换的对象的原来类型是什么，这个就需要首先把它转换成为自己本来的类型的对象，然后根据这个对象再去操作里面的元素，再一次的转换类型,...
java.lang.NoSuchMethodError: Ljava/util/Map;
最新发布
09-20
java.lang.NoSuchMethodError是Java编程语言中的一个错误，它表示在运行时无法找到特定方法的引用。在这种情况下，错误显示找不到`getConstantToAllLabels()`方法或`getProperties()`方法。这可能是由于以下原因之一引起的： 1. 版本不兼容：可能是因为你使用的库或框架版本与代码中的依赖项不匹配，导致方法无法找到。你需要确保正确地匹配依赖项的版本。 2. 编译错误：编译错误可能导致一些方法无法找到。请确保代码正确编译，并且所有依赖项都以正确的方式添加。 为了解决这个问题，你可以尝试以下几个步骤： 1. 检查依赖项：确保你的项目中所有的依赖项都是正确的，并且与代码兼容。如果有任何版本冲突，尝试升级或降级依赖项的版本，以确保它们能够正确匹配。 2. 清除缓存：清除你的构建工具（如Maven或Gradle）的缓存，并重新构建你的项目。这将确保你在构建过程中使用最新的依赖项。 3. 更新库或框架：如果你使用的库或框架已知存在问题，请尝试升级到最新版本，以查看是否修复了该问题。 4. 检查代码：仔细检查你的代码，确保你正确地引用了相关的方法，并且没有任何语法或拼写错误。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值