解决mongodb插入数据出现bson.errors错误

最新推荐文章于 2024-02-19 19:45:02 发布

会心一击

最新推荐文章于 2024-02-19 19:45:02 发布

阅读量4.9k

点赞数

分类专栏：学习文章标签： mongodb unicode 编码

本文链接：https://blog.csdn.net/github_36096512/article/details/52495337

版权

学习专栏收录该内容

1 篇文章 0 订阅

订阅专栏

解决mongodb插入数据出现bson.errors错误

在这里我会记录一些自己平时遇到过的一些问题及解决方法，希望与大家共同进步。

例子

对于“bson.errors.InvalidStringData: strings in documents must be valid UTF-8”的错误，可以通过如下方法来解决：

# 对编码出错的字符串
str = str_.decode("unicode_escape")

好了，就先这么多吧～

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

会心一击

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

解决bson.errors.InvalidDocument: Cannot encode object: Decimal(‘8500.00‘)数据插入MongoDB问题

mygodit的博客

04-04

6102

背景: 最近公司在做一个公众号的地方展示项目，原来的数据都是直接从MySQL中直接获取的。随着数据量的增大，查询效率越来越拖拉。然后呢，就想着把MySQL中的数据迁移到MangoDB中去。任务简洁明了，读取MySQL数据批量插入MangoDB中，任务完成，美滋滋。具体的数据迁移方法可以看这篇文章: https://blog.csdn.net/mygodit/article/details/88...

pymongo.errors.DocumentTooLarge: ‘aggregate‘ command document too large 解决

xu_xiu的博客

07-07

449

还有同事提出，可以将mysql里订单用dict的形式取出，基于hash判断在不在字典里，会快些，虽然判断会快些，但查出mongo所有的数据（300多万条），再进行循环统计电量还是会拉慢速度！因为数据库是基于内存做的，另外还需要扩大buffer"，但这是生产的数据，不能做这种冒失的操作，万一搞崩了，直接凉凉!需求：有个mysql订单库和mongo订单库，mongo里存的订单包含mysql存的订单，目标是统计在mongo里不在mysql里的订单的电量和订单数！没毛病，修改统计程序的代码为分页聚合！

参与评论您还未登录，请先登录后发表或查看评论

MongoDB可视化compass 连接数据库失败Invalid UTF-8 string in BSON document

IT赵云的博客

09-15

9012

An error occurred while loading navigation:Invalid UTF-8 string in BSON document 出现这个问题建议降低compass版本，1.25 版本即可 compass全版本下载地址：MongoDB Compass 1.28.1 Download for Windows 10, 8, 7 (filehorse.com)https://www.filehorse.com/download-mongodb-compass/632...

【解决】MongoDB Compass 报错 Invalid UTF-8 string in BSON document

最新发布

qq_22334245的博客

02-19

2303

各种尝试，卸载，重装，重启依然无效，最后发现同事的电脑名称是中文。改成英文名之后，问题解决。

bson.errors.InvalidStringData: strings in documents must be valid UTF-8

dongbi0665的博客

05-17

712

场景： pymongo 查询数据库的时候报错。 for gscode in GSList_StockPool_Mongo_MktStop: 　　self._collection_flash.find({"ymd": nDateNow, "gscode": gscode}).count() 原因：不是utf-8编码，gscode 取到的中文是乱码。解决方法： ...

MongoDB Compass 报错----An error occurred while loading navigation: Invalid UTF-8 string in BSON docum

m0_52779067的博客

07-15

2041

解决MongoDB Compass报错，亲测有效，An error occurred while loading navigation: Invalid UTF-8 string in BSON document

python数据格式化后导入数据库_如何为数据库导入重新格式化这个json？

weixin_36325338的博客

01-13

487

我有这些“json”文件，我想插入到我的mongodb数据库中。你知道吗问题是，它的格式如下：{ "channelType":"TEMPGROUP", ... } # line 1{ "channelType":"TEMPGROUP", ... } # line 2因此，它不是将它作为一个文档插入数据库，而是将每一行作为一个条目插入。最终，数据库中3个“json”文件中的3个文档变成了数据库中的1...

pymongo 批量插入数据

ImpulseDevil的博客

02-07

3949

pymongo 批量插入数据使用python+mongodb开发一个简单的计算机运行情况监控程序，为了方便后期测试，打算模拟批量往mongodb中插入测试数据，在使用insert_many时出现，如下错误提示： pymongo.errors.BulkWriteError: batch op errors occurred：经过查资料发现是pymongo在处理批量插入时会检测值是否一致，如果所...

MongoDB数据接入实践

IDEAL Garden

08-02

286

我们的数据仓库基于Hive构建，Hive的设计可以很好的兼容关系型数据库，如果数据源是关系型数据库，数据接入会相对容易。如何从非关系型数据库中接入数据呢？这里面有没有什么经验值得分享呢？本文将就非关系型数据库接入数据平台分享一些我们实践中的一些故事和经验。......

linux环境下MongoDB导入数据集报错：exception:BSON representation of supplied JSON is too large: code FailedToPar

qq_32312323的博客

06-18

890

最近需要把windows机器上mongo数据导入到linux服务器上，于是开始搜索网上导入导出的命令。参考了https://blog.csdn.net/weixin_39723544/article/details/79026597，开始导入，命令如下： mongoimport -d music -c kgBang --file /home/wuxia/KugouMusicMonitor/k...

bson.errors.InvalidDocument: Cannot encode object:错误的一种解决方法

dta0502的博客

10-29

3909

在Python中利用pandas库的read_csv函数读取CSV文件，文件中包含有数值型值，然后将其转换成字典存入Mongodb数据库中，但是在插入数据库中会报错： bson.errors.InvalidDocument: Cannot encode object: 这是因为pandas库在读取数值型值时返回的结果不是整型或者浮点型，而是numpy.int64类型的一个对象，Mongodb是无...

解决bson.errors.InvalidDocument: Cannot encode object:错误的一种方法

热门推荐

leaderwsh的博客

06-22

1万+

在Python中，首先利用pandas库的read_csv函数读取CSV文件，文件中包含有数值型值，然后将其转换成字典存入mongodb数据库中，但是在插入数据库中会报错：bson.errors.InvalidDocument: Cannot encode object:这是因为pandas库在读取数值型值时返回的结果不是整型或者浮点型，而是numpy.int64类型的一个对象，mongodb是无...

MongoDB插入,查看文档踩坑记

JavaEdge全是干货的技术号

03-17

2611

文档的数据结构和 JSON 基本一样。所有存储在集合中的数据都是 BSON 格式。 BSON 是一种类似 JSON 的二进制形式的存储格式，是 Binary JSON 的简称。 MongoDB 使用 insert() 或 save() 方法向集合中插入文档，语法如下： db.COLLECTION_NAME.insert(document) 实例以下文档可以存储在 MongoDB 的 runo...

94 org.bson.BsonSerializationException: Detected unknown BSON type ““ for fieldname “0“

970655147的专栏

02-13

951

前言呵呵最近在做数据迁移的时候发现了这样的一个问题大致的情况是使用 datax 来进行数据迁移, 源数据库是 mongo, 目标数据库是 postgres 查看了一下 datax 下面放的 mongo-java-driver 版本大概是 3.2.x, 还是 3.1.x, 然后使用一个 case 看了一下这个版本的 BsonType, 是没有 0x13 的这个 Type, 在高版本 3.4.x 以上的 mongo-java-driver 中才添加了这个BsonType.DECIMAL12...

2022.08.04 学习笔记

merryghoet的博客

08-04

2912

学习笔记

MongoDB 使用报错 java.lang.NoSuchMethodError: com.mongodb.client.MongoCollection.insertOne(Ljava/lang/Ob

LZW15082682930的博客

03-12

5852

错误描述： java.lang.NoSuchMethodError: com.mongodb.client.MongoCollection.insertOne(Ljava/lang/Object;)Lcom/mongodb/client/result/InsertOneResult; 详情： 2021-03-12 16:47:43.357 ERROR 15772 --- [nio-8899-exec-3] o.a.c.c.C.[.[.[/].[dispatcherServlet] : Serv

An error occurred while loading navigation: Invalid UTF-8 string in BSON document的问题解决

Forgotten2的博客

07-18

3100

除了下载低版本的compass之外，最简单的方法就是把你的计算机名称改成英文的，再重启一下电脑就行了。

An error occurred while loading instance info: Invalid UTF-8 string in BSON document

M030124的博客

12-02

946

日期取值的问题导致pymongo查询失败

weixin_33943836的博客

06-10

824

使用pymongo查询MongoDB时 query_result = db.foo.find() for r in query_result: print(r) 报了如下的错误 bson.errors.InvalidBSON: year 1971971 is out of range 原因日期字段值不对如下所示 { ...

Exception: java.lang.ClassCastException: com.mongodb.client.internal.FindIterableImpl cannot be cast to org.bson.Document

01-16

根据提供的引用内容，出现了一个异常：java.lang.ClassCastException: com.mongodb.client.internal.FindIterableImpl cannot be cast to org.bson.Document。这个异常通常发生在将com.mongodb.client.internal.FindIterableImpl对象强制转换为org.bson.Document对象时。以下是一个演示如何处理这个异常的例子： ```java import com.mongodb.client.FindIterable; import com.mongodb.client.MongoCollection; import com.mongodb.client.MongoCursor; import org.bson.Document; // 假设你已经创建了一个MongoClient对象和连接到了数据库 // 获取集合对象 MongoCollection<Document> collection = database.getCollection("your_collection_name"); // 执行查询操作 FindIterable<Document> iterable = collection.find(); // 遍历查询结果 MongoCursor<Document> cursor = iterable.iterator(); while (cursor.hasNext()) { Document document = cursor.next(); // 在这里处理查询结果 } // 关闭游标 cursor.close(); ``` 在这个例子中，我们使用了com.mongodb.client.FindIterable和org.bson.Document来处理查询结果。确保在使用查询结果之前，正确地使用这两个类来处理数据。