MongoDB(Motor) cursor id is not valid at server 问题

最新推荐文章于 2021-07-29 22:36:19 发布
最新推荐文章于 2021-07-29 22:36:19 发布
阅读量322 收藏
点赞数
分类专栏： 数据库 文章标签： mongodb
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/StanleyWm_/article/details/105914303
版权

MongoDB(Motor) cursor id is not valid at server 问题

Python使用Motor驱动操作MongoDB导出数据时遇到cursor id is not valid at server的问题，主要是因为Cursor空闲时间超过10分钟被服务器回收。可以通过以下两个参数来解决这个问题：

  • no_cursor_timeout ：设置cursor没有超时时间。
  • batch_size：设置每次获取的documet的个数。获取个数越少，处理时间越短，相当于缩短了cursor的空闲时间。

参考文档：Motor文档中的描述

StanleyWm_
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
解决 MongoDB 的 cursor id is not valid at server 问题
gehaixia的博客
01-13 1510
方法1 你在用 db.collection.find() 的时候，它返回的不是所有的数据，而实际上是一个“cursor”。它的默认行为是：第一次向数据库查询 101 个文档，或 1 MB 的文档，取决于哪个条件先满足；之后每次 cursor 中的文档用尽后，查询 4 MB 的文档。另外，find() 的默认行为是返回一个 10 分钟无操作后超时的 cursor。如果我一个 batch 的
MongoDB异步客户端 Motor的 增删改查
weixin_44818729的博客
04-03 1674
-- coding: utf-8 -- """ @Time : 2020/4/3 14:54 @Athor : LinXiao @功能 : """ ------------------------------ Motor使用教程 banner Motor提供了一个基于协程的API，用于对MongoDB的非阻塞访问。 安装 import asyncio import pp...
tornado中使用motor异步连接mongodb
harry
07-29 520
tornado使用pymongo连接mongodb数据库是阻塞的方式，访问量大的时候就会出现阻塞的情况， 这时可以使用motor模块去解决，motor是MongoDb的异步python驱动程序。 pip install motor 安装motor模块 编写server.py import os import tornado.ioloop from tornado import gen import tornado.web import motor class Index(tornado.w.
MongoDB 游标超时解决办法（cursor id is not valid at server）
weixin_40583191的博客
04-01 937
你在用 db.collection.find() 的时候，它返回的不是所有的数据，而实际上是一个“cursor”。它的默认行为是：第一次向数据库查询 101 个文档，或 1 MB 的文档，取决于哪个条件先满足；之后每次 cursor 中的文档用尽后，查询 4 MB 的文档。另外，find() 的默认行为是返回一个 10 分钟无操作后超时的 cursor。如果我一个 batch 的文档十分钟内没处理...
MongoDB 游标(Cursor)
luorufeng的专栏
08-21 1605
  游标定义： 通俗的讲，游标是查询的返回资源接口，通过这个接口可以逐条遍历。   声明游标： var c1 = db.user.find({age:{$lt:5}}); c1.hasNext();//判断游标是否已经到了尽头 c1.next();//取出游标的下一个单元   eg: var c1 = db.user.find({age:{$lt:5}}); while ...
PyMongo和Motor两种MongoDB的Python驱动程序对比简介
卓懿的博客
02-21 1836
文章目录@[toc]1-Python驱动MongoDB1.1-PyMongo1.1.1-安装1.1.2-连接到MongoDB Atlas1.1.3-兼容性1.2-Motor (Async Driver)1.2.1-安装1.2.2-连接到MongoDB Atlas1.2.3-兼容性 1-Python驱动MongoDB 官方文档：https://docs.mongodb.com/ecosystem/d...
MongoDB/SQL Server增量同步方案
12-14
MongoDB/SQL Server增量同步方案是一项复杂而关键的任务，尤其考虑到SQL Server的特性，目前市场上缺乏成熟的开源解决方案。本文探讨了三种可行的同步方法：基于时间戳更新、使用触发器和利用SQL Server的CDC...
详解如何使用MongoDB+Springboot实现分布式ID的方法
08-25
详解使用MongoDB+Springboot实现分布式ID的方法 在分布式系统中，生成唯一的ID是非常重要的，否则可能会导致数据混乱。MongoDB提供了一种轻量级的ObjectId机制，可以生成全局唯一的ID。Springboot是Java开发的热门...
graphql-mongodb-server：GraphQL MongoDB服务器
02-03
GraphQL MongoDB服务器 使用GraphQL和MongoDB的服务器样板。 介绍 这是使用GraphQL和MongoDB的服务器样板。 使用GraphQL Yoga支持订阅。 入门 使用https://github.com/leonardomso/graphql-mongodb-server.git克隆此...
SqlServer与MongoDB结合使用NHibernate
09-09
在MongoDB中，`MongoNodeRepository`通过NHibernate的UnitOfWork模式获取ById的方法来检索数据，这展示了ORM如何透明地处理不同数据库的查询。 总的来说，SqlServer与MongoDB结合使用NHibernate能够提供灵活的数据...
mongodb-file-server：MongoDB文件服务器是基于MongoDB的文件服务器系统。基于MongoDB的文件服务器
01-29
MongoDB File Server致力于存储小文件，例如博客中的图片，普通文档等。 它使用了一些非常流行的技术，例如： MongoDB 3.6.4 Spring Boot 2.0.3。发布 Spring Data MongoDB 2.0.8.RELEASE Spring5.0.7。发布 ...
is not valid JSON: json: cannot unmarshal string into Go value of type map[string]interface
热门推荐
lwx356481的博客
09-10 2万+
执行mongoexport命令的时候 D:\Program Files\MongoDB\Server\4.0\bin>mongoexport.exe -h localhost:27001 -d mldn -c emps -q '{age:{$gt:20}}' -f name,age,job,salary --type=csv > emps1.csv 2018-09-10T10:49...
用python代码自动随机生成mysql数据中的错误--Cursor is not connected
qq_34949842的博客
04-12 932
一开始的操作 先在mysql可视化工具里面创建数据库 CREATE TABLE `mydb`.`users` ( `user_id` INT NOT NULL AUTO_INCREMENT, `username` VARCHAR(45) NULL, `password` VARCHAR(45) NOT NULL, `realname` VARCHAR(45) NULL, `ci...
用命令行创建一个工程提示：Error: Target id is not valid（简单版本）
o396032767的博客
07-30 1290
用命令行创建一个android 工程，提示错误：Error: Target id is not valid. Use 'android.bat list targets' to get the target ids.        首先命令行创建工程所用的命令是： #>android create project -n HelloWorld -t 6 -p HelloWorld -k o...
python读mongodb很慢_基于python3.7利用Motor来异步读写Mongodb提高效率(推荐)
weixin_39579548的博客
12-04 272
如果使用Python做大型海量数据批量任务时，并且backend用mongodb做数据储存时，常常面临大量读写数据库的情况。尤其是大量更新任务，由于不能批量操作，我们知道pymongo是同步任务机制，相当耗时。如果采用多线程、多进程的方案确实有效，但编写麻烦、消耗系统资源大(pymongo还不允许fork线程中共用连接)。这里主要瓶颈在于IO，使用单线程异步操作就会效果很好。Motor是一个异步m...
mongo报错 is not valid JSON: json
dzl84394的专栏
06-06 7522
执行mongoexport命令的时候 mongoexport --csv -f externalSeqNum,paymentId --host 127.0.0.1:27017 -d liveX -c consume_history -o 0531bill.csv -q '{"consumeStatus":"SUCCESS","externalSeqNum":/^201705/}' 报了
MongoDB 游标超时解决办法
zjgnl的专栏
06-23 4956
解决 MongoDB 的 cursor id is not valid at server 问题你在用 db.collection.find() 的时候，它返回的不是所有的数据，而实际上是一个“cursor”。它的默认行为是：第一次向数据库查询 101 个文档，或 1 MB 的文档，取决于哪个条件先满足；之后每次 cursor 中的文档用尽后，查询 4 MB 的文档。另外，find() 的默认行为...
mongo3.5 java cursor,Spring data mongodb - The 'cursor' option is required
最新发布
05-17
这个错误通常是由于使用了过期的 MongoDB 驱动程序版本导致的。如果您正在使用 Spring Data MongoDB，可以尝试更新 MongoDB 驱动程序版本。在 Maven 项目中，您可以在 pom.xml 文件中将以下依赖项更改为最新版本： ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值