spark和mongdb连接报错：NoSuchFieldError: UNSPECIFIED

已于 2023-03-08 09:45:27 修改
阅读量192 收藏
点赞数
分类专栏： spark 文章标签： spark mongodb 大数据
于 2023-03-08 09:36:11 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46175258/article/details/129396381
版权
在Scala2.12环境下，使用Spark3.0.0和MongoDB4.0.0时，出现Exceptioninthreadmainjava.lang.NoSuchFieldError:UNSPECIFIED的错误。问题源于引用了多个mongo-spark-connector版本。解决方法是注释掉冲突的库，确保只使用一个版本的连接器。
摘要由CSDN通过智能技术生成

spark和mongdb连接报错（ scala2.12环境）：Exception in thread "main" java.lang.NoSuchFieldError: UNSPECIFIED


我在使用spark操作mongodb是报连接错误：Exception in thread “main” java.lang.NoSuchFieldError: UNSPECIFIED

使用的环境

  1. scala2.12（和scala2.11差别挺大的，被坑的很惨）
  2. spark3.0.0 mongosb4.0.0

错误截图

报错截图
报错截图

原因

引用了多个mongo-spark-connector
引用了两个驱动

在这里插入图片描述

解决

将其中一个注释了
将其中一个注释了

打斯给得，可米沙马
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
java.lang.NoSuchFieldError: Companion
06-16
<groupId>com.squareup.okio</groupId> <artifactId>okio <version>2.8.0</version>
java.lang.NoSuchFieldError: STRING
02-19
解决 java.lang.NoSuchFieldError: STRING at org.jbpm.identity.hibernate.PermissionUserType. 不用jbpm的jbpm-identity.jar 用这个就好
Spark 链接 Mongodb 报错：java.lang.NoSuchFieldError: UNSPECIFIED
weixin_42151880的博客
08-31 1154
spark connect mongodb
MongoDB had an unspecified uncaught exception. 报错
xiangyong882000的专栏
01-03 561
MongoDB had an unspecified uncaught exception. This can be caused by MongoDB being unable to write to a local database. Check that you have permissions to write to .meteor/local. MongoDB does not s
meteor报错之:MongoDB had an unspecified uncaught exception.
weixin_30407613的博客
04-09 168
今天测试的时候meteor报了个错 如下： MongoDB had an unspecified uncaught exception. This can be caused by MongoDB being unable to write to a local database. Check that you have permissions to write to .meteor/lo...
mongodb远程连接_Asp.Net Core 连接Mongodb 副本集 timeout Unspecified
weixin_39763293的博客
12-24 242
最近使用Mongo.Driver库开发一个应用去连接mongodb的一个副本集,其中mongodb的副本集搭建在同一台机器上(172.27.0.4，三个节点的端口分别时27014,27015,27016,关闭了认证并允许远程连接)，应用部署在另外一台机器(172.27.0.5)。在使用MongoClient类时，传入的连接URL为："mongodb://172.27.0.4:27014,172....
为什么执行JAVA程序时，会出现Exception in thread"main" java.lang.NoClassDefFoundError的错？...
10-21 868
为什么执行JAVA程序时，会出现Exception in thread"main" java.lang.NoClassDefFoundError的错？...应该这样检查你的环境和你的操作： 1、你的文件名对吗？<br />JAVA要求你的文件和你的类名严格对应的。<br />比如 public class HelloWorld{ .....<br />那么文件名一定只能是HelloWorld.java，看仔细了！ 2、你的程序中有main方法吗？参数什么的对吗？<br />main方法的声明应该是这样子
java.lang.NoSuchFieldError Companion
06-15
java.lang.NoSuchFieldError: Companion 问题的解决方案
Android NoSuchFieldError解决办法
08-29
在Android开发过程中，开发者可能会遇到`NoSuchFieldError`这样的异常，这是一个典型的运行时错误，通常与类加载和字段查找有关。本文将深入探讨这个错误的原因、如何复现它以及有效的解决策略。 `NoSuchFieldError...
解决tomcat7，8使用memcache管理session时出现NoSuchFieldError:attributes错误的完整jar包
01-30
当我们在Tomcat中使用Memcache来管理session时，可能会遇到一些技术问题，如在本例中的`NoSuchFieldError: attributes`错误。 `NoSuchFieldError`通常在运行时出现，当尝试访问一个不存在于类或接口中的字段时抛出...
关于java.lang.NoSuchFieldError报错解决方案
热门推荐
haifeng_cool的专栏
08-15 7万+
问题浮现（结论党请跳过这一节直接查看‘总结’）： 今天项目遇到这个问题，搜集网上各路大神的解决方式，都是第三方jar包使用高版本之后便解决了问题，也有少数人说是因为同时出现高版本和低版本jar包出现的问题，比如：，又比如：。 那么问题来了，我们使用的类名定义都是自定义的类，包路径也是公司名+部门名称+类名，比如：com.companyname.partname.BusinessError。这还
IDEA报错：java.lang.NoSuchFieldError 和 NoSuchMethodError
whtaname的博客
02-01 6749
java报错：java.lang.NoSuchFieldError 和 NoSuchMethodError
解决java.lang.NoSuchFieldError异常
万紫辉的博客
07-17 4万+
如何解决java.lang.NoSuchFieldError异常
MongoDB连接报错java.lang.NoSuchFieldError ACKNOWLEDGED
串一串爪娃子
06-09 1149
BUG描述 使用SpringBoot整合MongoDB时，正要运行代码连接mongo，就赤红赤红的报了个错： 1 2 3 4 5 Exception in thread "main" java.lang.NoSuchFieldError: ACKNOWLEDGED at com.mongodb.MongoClientOptions$Builde...
jar 包冲突 java.lang.NoSuchFieldError
u010325193的博客
06-20 2万+
 java.lang.NoSuchFieldError: INSTANCE异常，可能是jar包冲突了。我遇到的情况是maven里引入了一个JAR，而我又在lib里面引入了这个jar，并且版本还不相同，就出了这个错。解决办法：1mvn dependency:tree -dverbose2(1)  安装使用插件 maven Helper 插件, 重新启动idea 后插件才能生效(2)在IntelliJ...
java.lang.NoSuchFieldError 异常原因
weixin_33910460的博客
06-20 1924
一般都是因为 class 或 jar 包重复 导致的 ， 也有可能是编译器的问题。 我碰到的问题是，在项目api 接口jar包里定义了一个Config.java，然后在业务层service 项目 的相同包下 又定义了一个Config.java， 本地调试启动时不报错。 而部署到线上时报错，提示：java.lang.NoSuchFieldError ， 找了半天没找到问题。后台在项目查找到...
Android java.lang.NoSuchFieldError: 完美解决办法,以及原因
weixin_43942430的博客
12-24 6211
FATAL EXCEPTION: main Process: cn.com.jusoft.epumping.staff, PID: 27129 java.lang.NoSuchFieldError: No static field ib_select of type I in class Lcom/ufo/imageselector/R$id; or its superclasses (decla...
java.lang.NoSuchFieldError: INSTANCE 解决方法
svmachine的博客
01-18 7532
运行java web项目时提示：java.lang.NoSuchFieldError: INSTANCE，跟踪发现时httpClient版本冲突的原因，删除冲突的jar包即可。 如果不知道冲突jar包的位置，可以通过如下的方法跟踪： 如图： String className = SSLConnectionSocketFactory.class.getName(); String cl
Exception in thread "main" java.lang.NoSuchFieldError: INSTANCE
canghyx的博客
05-26 1万+
具体报错如下 xception in thread "main" java.lang.NoSuchFieldError: INSTANCE at org.apache.http.impl.io.DefaultHttpRequestWriterFactory.(DefaultHttpRequestWriterFactory.java:52) at org.apache.http
异常】JDK21报错NoSuchFieldError: Class com.sun.tools.javac.tree.JCTree$JCImport does not have member fie
最新发布
05-28
在这个具体的情况中，JDK21 报错 NoSuchFieldError: Class com.sun.tools.javac.tree.JCTree$JCImport does not have member field 中的异常是由于使用的JDK版本过低导致的。在 JDK 1.8 及之前版本中，并没有 ...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值