monogdb使用中的坑

在MongoDB中,内排序大内存限制最大为100M,如果执行一个更大的排序,需要使用 allowDiskUse 选项来将数据写到临时文件来排序。

在查询语句中添加 allowDiskUse 选项:

db.bigdata.aggregate(
[  {$group : {_id : "$range", total : { $sum : 1 }}},  {$sort : {total : -1}}
],  {allowDiskUse: true}
);
MongoDB2.6之后的版本提供了allowDiskUse关键字,解决了之前的仅能使用100MB内存的瓶颈。

 MongoDB GroupBy操作, 结果集大小限制问题
是不支持大于2万的结果集,即分组后产生的文档数量不能超过2万。
解决问题
    问题是用来解决的,通过stackoverflow大神的指点,我尝试着用MongoDB的mapreduce搞定它

注意1:MongoDB2.6之后的版本支持将aggregate的结果以cursor或者写入collection的方式返回,而在之前的版本,需要把数据保存在一个document中返回,这会遇到BSON document size不能超过16MB的瓶颈。

http://book.douban.com/people/cswuyg/annotation/21750150/

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/91975/viewspace-1983671/,如需转载,请注明出处,否则将追究法律责任。

转载于:http://blog.itpub.net/91975/viewspace-1983671/

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值