MongodbMapReduced的简单使用
简单理解:
mongodb 的mapReduce 很类似于分组语句(group by) ,map 函数按照key进行分组而后reduce函数进行计算。reduce的语法是类似于JavaScript,不知道在哪看到的。因为用的少,所以很复杂的用法不是很清楚,但是如果是使用分组聚合操作,那么使用MapReduce是一个很好的选择。
mongodb shell
下面这个命令简单来讲就是 查询col这个集合 map函数的key 为 name value 为 data
reduce函数则是使用Array.sum(value) 对value进行求和
最后的 query为查询条件,查询data字段大于30的;out:{inline: 1} 这个代表不生成临时集合(在shell里使用MapReduce默认会生成一个临时集合用来存储处理后的数据,这个临时集合在断开连接后会删除),这个是在菜鸟教程看到的
说一下简单的操作流程:
首先根据条件查询筛选出数据,而后根据map里面的key进行分组,而后根据reduce里面的操作进行数据计算(这里就是简单的求和)
db.getCollection("col").mapReduce(
function(){emit(this.name,this.data)},
function(key,value){
return Array.sum(value);
},
{
query:{data:{$gt:30}},
out:{
inline: 1
}})
原数据
mongo shell 执行结果
springboot 使用mongodb MapReduce
@Test
public void testMongoMapReduce(){
//map函数
String mapStr = "function(){emit(this.name,this.data)}";
//reduce函数
String reduce = "function(key,value){return Array.sum(value);}";
//条件
Query query = new Query();
query.addCriteria(Criteria.where("data").gt(40));
//springboot 集成好的模板
MapReduceResults<Map> mapReduce = mongoTemplate.mapReduce(query , "col", mapStr, reduce, Map.class);
//下面的就是Java基础了
Iterator<Map> iterator = mapReduce.iterator();
while(iterator.hasNext()){
Map map = iterator.next();
Iterator mapIterator = map.keySet().iterator();
while(mapIterator.hasNext()){
Object key = mapIterator.next();
System.out.println("key:"+key);
System.out.println("value:"+map.get(key));
}
}
}