在MongoDB中,内排序大内存限制最大为100M,如果执行一个更大的排序,需要使用 allowDiskUse 选项来将数据写到临时文件来排序。
MongoDB GroupBy操作, 结果集大小限制问题
是不支持大于2万的结果集,即分组后产生的文档数量不能超过2万。
解决问题
问题是用来解决的,通过stackoverflow大神的指点,我尝试着用MongoDB的mapreduce搞定它
注意1:MongoDB2.6之后的版本支持将aggregate的结果以cursor或者写入collection的方式返回,而在之前的版本,需要把数据保存在一个document中返回,这会遇到BSON document size不能超过16MB的瓶颈。
http://book.douban.com/people/cswuyg/annotation/21750150/
在查询语句中添加 allowDiskUse 选项:
db.bigdata.aggregate( [ {$group : {_id : "$range", total : { $sum : 1 }}}, {$sort : {total : -1}} ], {allowDiskUse: true} );MongoDB2.6之后的版本提供了allowDiskUse关键字,解决了之前的仅能使用100MB内存的瓶颈。
MongoDB GroupBy操作, 结果集大小限制问题
是不支持大于2万的结果集,即分组后产生的文档数量不能超过2万。
解决问题
问题是用来解决的,通过stackoverflow大神的指点,我尝试着用MongoDB的mapreduce搞定它
注意1:MongoDB2.6之后的版本支持将aggregate的结果以cursor或者写入collection的方式返回,而在之前的版本,需要把数据保存在一个document中返回,这会遇到BSON document size不能超过16MB的瓶颈。
http://book.douban.com/people/cswuyg/annotation/21750150/
来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/91975/viewspace-1983671/,如需转载,请注明出处,否则将追究法律责任。
转载于:http://blog.itpub.net/91975/viewspace-1983671/