mongo 文档清理重复项

最新推荐文章于 2021-12-01 09:45:01 发布

bushiyao_

最新推荐文章于 2021-12-01 09:45:01 发布

阅读量109

点赞数

分类专栏： mongo python 文章标签： MongoDB 聚合操作去重公共ID 数据清洗

本文链接：https://blog.csdn.net/bushiyao_/article/details/118675841

版权

python 同时被 2 个专栏收录

16 篇文章 0 订阅

订阅专栏

mongo

2 篇文章 0 订阅

订阅专栏

db.link_User.aggregate([
    {
        $group: { _id: {public_id: '$public_id'}, count: {$sum: 1},dups: {$addToSet: '$_id'}}
    },
    {
        $match: {count: {$gt: 1}}
    }
],
{allowDiskUse: true}
).forEach(function(doc){
    doc.dups.shift();
    db.link_User.remove({_id: {$in: doc.dups}});
}

_id 设置条件
count 统计数量
dups 重复列表
match 设置筛选条件