spark +MongoDB出现报错: Cannot cast BsonValue

运用Spark将数据插入mongodb中,出现上述这样错误,可用以下两种方法试一下:
1.放在spark目录lib下的jar包mongo-spark-connector是否与spark的版本有冲突,
在这里插入图片描述
2.spark插入的数据存在decimal,bigint 之类的值,需要插入之前转化成double和 long 类型的,比较麻烦的方法是通过sparkcore遍历每个元素去判断,这个我们就不建议了,还有个比较简单的方式,dataframe转化是decimal,bigint 的数据类型的列,生成新的dataframe然后在写入mongodb
如下举例子:
在这里插入图片描述

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值