[原创] pymongo collection count vs count_documents vs estimated_document_count

于 2024-01-05 15:01:55 发布
阅读量442 收藏 9
点赞数 10
分类专栏： python 文章标签： pymongo python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u012731379/article/details/135409984
版权
本文讨论了在MongoDB中使用count()和count_documents函数统计表行数时，count_documents的效率问题，指出其为全表扫描导致速度慢，并对频繁更改标准函数命名的做法表达了质疑。
摘要由CSDN通过智能技术生成

count() 已经删掉了

统计表行数, 用 estimated_document_count()

count_documents 是扫表, 即使用 count_documents({}) 也是扫表, 巨慢巨慢巨慢.

吐槽, 标准函数名都改来改去的, 有什么大病…

zhipeng-python
关注
  • 10
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
pymongo insert_many 批量插入的实例
01-19
我就废话不多说了，大家还是直接看代码吧~ lt=client.fangjia.district_stat_all_0416 dl = dt.find(query) bf=[] for m in dl: bf.append(m) if len(bf)==20000: lt.insert_many(bf) bf=[] lt.insert_many(bf) 补充知识：Python操作Mongodb插入数据的两种方法：insert_one()与insert_many() 代码说明： 将mysql中table的数据插入到mongodb里 sys.setdefaultenco
pymongo count和count_documents效率对比
ncsky的专栏
11-25 3582
time_start = time.time() results = col.find({"type":'1min'}) results_count = results.count() time_end = time.time() total_time = time_end - time_start print("count共{}条，结束消耗: {} 秒".format(results_count,total_time)) time_start = time.time() results1 = col..
pymongo简单使用
Tjhfsghbjknjdy的博客
04-25 284
代码： # -*- coding: utf-8 -*- # @Time : 2020/4/25 15:09 # @Author : Oneqq # @File : 1.mongo.py # @Software: PyCharm import pymongo client = pymongo.MongoClient() person = client.person student = per...
Python3 pymongo 使用 count 报警告解决办法
W_chuanqi的博客
07-31 6372
后面我将count()修改为estimated_document_count()，运行之后，发现还是报错。在网上查找资料发现，count方法已经被新版本淘汰了，我们可以使用新的统计方法。后来找到了原因，发现把find()方法去掉就可以了。如果是带条件的查询统计就需要使用。...
python操作MongoDB数据库
liujingliuxingjiang的博客
12-21 4488
确保： （1）安装了MongDB，并启动了服务。没有安装的话，可以参考https://blog.csdn.net/liujingliuxingjiang/article/details/122068753?spm=1001.2014.3001.5501 （2）安装了python和pip 1.安装pymongo pip install pymongo 2.连接MongoDB 使用pymongo库中的MongoClient，需要传入ip和端口。 import pymongo client = pymongo.M
MongoDB estimatedDocumentCount countDocuments的区别
fenglllle的博客
10-07 3708
前言 笔者在从MongoDB 2的版本升级到MongoDB4的时候，发现驱动API修改很大，虽然仍然保留了旧的API可以使用，但是驱动不知道什么时候就会删除这些旧的API，所以使用了新的API，其中一个重要的坑是计算document的count，原来是DBCollection的count()方法，现在API变更为MongoCollection已经废弃了，笔者想当然的使用了MongoCollection的countDocuments，这里就留下了性能隐患。事实也是：MongoDB驱动从3.x升级到4.x，很
解决Pymongo insert时会自动添加_id的问题
01-19
在使用pymongo时遇到了一个小坑： 在Flask框架中，将字典插入mongodb后再返回就报错 @app.route('xxxx') def main(): ... data = { 'a':'a', 'b':'b' } mycol.insert_one(data) return data Traceback ...
pymongo_demo.py
12-13
pymongo_demo.py为MongoDB数据库的使用脚本。包含以下： （一）连接MongoClient；（二）获取数据库(database)；（三）连接或创建Collection(集合)； （四）存储数据；（五）从MongoDB中 查询 数据；（六）更新数据...
pymongo 3.7.1 win_amd64.whl
09-30
Python 要连接 MongoDB 需要 MongoDB 驱动，使用 PyMongo 驱动来连接。
tencent.rar_Python 岗位_cannotn79_python scrapy
09-24
8. **PyMongo库**: PyMongo是Python连接MongoDB的官方驱动，提供了一系列接口，如连接数据库、创建集合、插入文档、查询数据等，方便开发者操作MongoDB。 9. **数据模型设计**: 设计合适的文档结构，以反映岗位信息...
pymongo的一些操作记录
谁怕平生太急
03-02 227
记录菜鸟教程中不包含的部分操作： 获得collection中documents总数 mycol.count_documents({}) 用python操作MongoDB 查询collection中最新的一个document mycol.find_one(sort=[(’_id’, -1)]) pymongo的比较排序查询性能比较，sort参数和sort函数， find和find_one ...
Python操作MongoDB基本使用
baidu_36900142的博客
11-04 1359
Python操作MongoDB基本使用
pymongo模块详解（含官方文档翻译）
漫步量化
07-16 4013
github pymongo支持MongoDB 2.6, 3.0, 3.2, 3.4, 3.6 and 4.0. PyMongo 3.8.0 Documentation 建立与MongoClient的连接 使用PyMongo的第一步是创建一个MongoClient来运行mongod实例。很简单 from pymongo import MongoClient client = Mongo...
python基础爬虫数据存储MongoDB文档存储学习笔记
qq_38332975的博客
12-05 656
首先关于MongoDB安装于配置，由于MongoDB已经升级到4.x版本所以下面给出关于4.x的安装于配置关于python连接到MongoDB使用PyMongo库安装方法 连接时用PyMongo的MongoClient方法，传入地址及端口，没声明端口则默认为27017 当然也可以传入一个连接字符串 指定数据库首先先指定一个数据库例如指定test数据库 指定集合类比于指定数据库 插入数据这里注意一点因为MongoDB在4.x以上的版本删除了insert的插入方法所以应当用insert_on
pymongo使用记录
jiangbenchu的博客
06-15 1160
2、报错处理 1、报错： 修正： eg 2、报错： 改正 3、报错 在 3.0 及以上版本 已被删除。您现在应该改用 可以改成
MongoDB本地复制表和计数方法count_documents()
thefail的博客
11-16 3080
1.MongoDB表的复制方式 因copyTo函数废弃，因此MongoDB没有本地集合复制方法，但可以使用以下方法复制集合 db.company.aggregate([{$match:{}},{$out:"company_v1"}]) 2.不同数据类型下count()用法有区别 string类型的count()方法需要提供被计算字符参数，数据库游标类型cursor则不需要提供 coun...
Mongoose - count和countDocuments方法
热门推荐
seaalan的博客
04-11 1万+
This method is deprecated. If you want to count the number of documents in a collection, e.g. count({}), use the estimatedDocumentCount() function instead. Otherwise, use the countDocuments() function...
Python操作MongoDB看这一篇就够了
weixin_45722061的博客
10-15 1540
MongoDB是由C++语言编写的非关系型数据库，是一个基于分布式文件存储的开源数据库系统，其内容存储形式类似JSON对象，它的字段值可以包含其他文档、数组及文档数组，非常灵活。在这一节中，我们就来看看Python 3下MongoDB的存储操作。 1. 准备工作 在开始之前，请确保已经安装好了MongoDB并启动了其服务，并且安装好了Python的PyMongo库。 2. 连接Mon...
pymongo Collection.count_documents例子
最新发布
04-30
关于 pymongo Collection.count_documents 的例子，您需要了解它的具体用途和参数。该函数用于返回集合中满足条件的文档数，其中参数 filter 为筛选条件，支持多种复杂查询方式，例如 $in, $nin, $gt, $lt 等等。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值