php mongo mapreduce,javascript – MongoDB mapReduce方法出乎意料的...

我的mongoDB中有100个文档,假设它们中的每一个都可能与不同条件下的其他文档重复,例如firstName&姓氏,电子邮件和手机.

我试图mapReduce这100个文件,以具有键值对,如分组.

一切正常,直到我在DB中有第101个重复记录.

与第101条记录重复的其他文档的mapReduce结果的输出已损坏.

例如:

我正在研究firstName& lastName现在.

当DB包含100个文档时,我可以包含结果

{

_id: {

firstName: "foo",

lastName: "bar,

},

value: {

count: 20

duplicate: [{

id: ObjectId("/*an object id*/"),

fullName: "foo bar",

DOB: ISODate("2000-01-01T00:00:00.000Z")

},{

id: ObjectId("/*another object id*/"),

fullName: "foo bar",

DOB: ISODate("2000-01-02T00:00:00.000Z")

},...]

},

}

这正是我想要的,但……

当数据库包含100多个可能的重复文档时,结果就像这样,

假设第101个文件是

{

firstName: "foo",

lastName: "bar",

email: "foo@bar.com",

mobile: "019894793"

}

包含101个文件:

{

_id: {

firstName: "foo",

lastName: "bar,

},

value: {

count: 21

duplicate: [{

id: undefined,

fullName: undefined,

DOB: undefined

},{

id: ObjectId("/*another object id*/"),

fullName: "foo bar",

DOB: ISODate("2000-01-02T00:00:00.000Z")

}]

},

}

包含102个文件:

{

_id: {

firstName: "foo",

lastName: "bar,

},

value: {

count: 22

duplicate: [{

id: undefined,

fullName: undefined,

DOB: undefined

},{

id: undefined,

fullName: undefined,

DOB: undefined

}]

},

}

我发现stackoverflow上的另一个主题有类似我的问题,但答案对我不起作用

MapReduce results seem limited to 100?

有任何想法吗?

编辑:

原始源代码:

var map = function () {

var value = {

count: 1,

userId: this._id

};

emit({lastName: this.lastName, firstName: this.firstName}, value);

};

var reduce = function (key, values) {

var reducedObj = {

count: 0,

userIds: []

};

values.forEach(function (value) {

reducedObj.count += value.count;

reducedObj.userIds.push(value.userId);

});

return reducedObj;

};

源代码现在:

var map = function () {

var value = {

count: 1,

users: [this]

};

emit({lastName: this.lastName, firstName: this.firstName}, value);

};

var reduce = function (key, values) {

var reducedObj = {

count: 0,

users: []

};

values.forEach(function (value) {

reducedObj.count += value.count;

reducedObj.users = reducedObj.users.concat(values.users); // or using the forEach method

// value.users.forEach(function (user) {

// reducedObj.users.push(user);

// });

});

return reducedObj;

};

我不明白为什么它会失败,因为我也将值(userId)推送到reducedObj.userIds.

关于我在map函数中发出的值有什么问题吗?

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值