mongoTemplate查询大数据过慢

先上两段代码 
代码一

Query query = new Query();
queryAfter.addCriteria(Criteria.where("id").in(idList));
queryAfter.addCriteria(Criteria.where("time").gte(startTime).lte(endTime));
List<TestEntity> lists = mongoTemplate.find(queryBefore,TestEntity.class);
  • 1
  • 2
  • 3
  • 4

代码二

DBObject query1 = new BasicDBObject(); //setup the query criteria 设置查询条件
query1.put("id", new BasicDBObject("$in", idList));
query1.put("time", (new BasicDBObject("$gte", startTime)).append("$lte", endTime));
DBCursor dbCursor =mongoTemplate.getCollection("testEntity").find(query1);
List<TestEntity> list=new ArrayList<>();
while (dbCursor.hasNext()){
    DBObject object=dbCursor.next();
    TestEntity te=new TestEntity();
    te.setId(object.get("_id").toString());
    te.setTime((Date) object.get("time"));
    list.add(te);
}
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12


集合部分截图:


逻辑很简单,从testEntity集合中根据id列表和开始结束时间进行文档筛选,但是在大数据量下,差别太大了! 

比如testEntity集合有25万条文档,查询出4万条文档转换成TestEntity实体类集合,第一种直接转换成实体要80秒,而第二种耗时1秒不到!我一度还以为是mongo的问题,后来才定位到是代码的坑!

所以数据量大的时候还是用原生查询手动映射成实体类比较快!

  • 2
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
MongoTemplate是Spring Data MongoDB提供的一个用于操作MongoDB数据库的模板类。它提供了一系列的方法来执行各种查询操作。 MongoTemplate查询可以分为以下几种类型: 1. 基本查询:使用MongoTemplate的find()方法可以执行基本的查询操作。你可以通过构建Query对象来指定查询条件,也可以使用Criteria对象来构建更复杂的查询条件。 2. 分页查询:使用MongoTemplate的find()方法结合Pageable对象可以实现分页查询。你可以通过设置Pageable对象的页码和每页记录数来进行分页查询。 3. 聚合查询:使用MongoTemplate的aggregate()方法可以执行聚合查询操作。你可以使用Aggregation对象来构建聚合查询的管道操作,如$match、$group、$sort等。 4. 文本搜索:使用MongoTemplate的textSearch()方法可以执行全文搜索操作。你可以指定要搜索的字段和搜索关键字,MongoDB会返回匹配的文档。 5. 条件查询:使用MongoTemplate的query()方法可以执行条件查询操作。你可以使用Example对象来指定查询条件,MongoDB会返回符合条件的文档。 6. 更新操作:使用MongoTemplate的updateFirst()、updateMulti()等方法可以执行更新操作。你可以使用Update对象来指定更新的字段和值。 7. 删除操作:使用MongoTemplate的remove()方法可以执行删除操作。你可以使用Query对象来指定删除条件。 以上是MongoTemplate的一些常用查询操作,你可以根据具体需求选择合适的方法来执行查询

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值