Mongodb查询重复数据

最新推荐文章于 2024-07-30 16:27:53 发布

老李笔记

最新推荐文章于 2024-07-30 16:27:53 发布

阅读量1.2k

点赞数

分类专栏： # MongoDB

本文链接：https://blog.csdn.net/Asia1752/article/details/115252036

版权

MongoDB 专栏收录该内容

12 篇文章 1 订阅

订阅专栏

这篇博客介绍了如何使用MongoDB的聚合框架来查找并过滤出重复数据。通过`$group`和`$addToSet`操作符，作者展示了如何按`md5`字段分组并收集唯一标识符，然后利用`$sum`计数找出数量大于1的记录，从而定位到重复项。

摘要由CSDN通过智能技术生成

Mongodb查询重复数据

脚本

 db.storageFile.aggregate(
    {
        '$group': {
            '_id': {
                'md5': '$md5'
            },
            'uniqueIds': {
                '$addToSet': '$_id'
            },
            'count': {
                '$sum': 1
            }
        }
    },
    {
        '$match': {
            'count': {
                '$gt': 1
            }
        }
    }
)