ES聚合(分组)后分页

  • 正常情况下是不支持聚合后分页的,以下的原理是按照某个字段分组(桶),再对组(桶)进行排序或直接截断(分页)
  • 分页后是得不到分组后的组的总个数,目前采用的方法是先去查询组的总个数,然后分页,接着将两个结果合在一起使用
POST /log_*/_search
{
  "size": 0,
  "aggs": {
    "day": {
      "date_histogram": {
        "field": "@timestamp",
        "interval": "day",
        "format": "yyyy-MM-dd"
      },
    "aggs": {
      "bucket_truncate": {
        "bucket_sort": {
          "from": 0,
          "size": 20
        }
      }
    }
    }
  }
}

解释

  • 第一个size
    表示返回0条数据(hits中的数据)
  • 第一个aggs
    表示对@timestamp按照天进行分组,并将结果进行日期格式化

  • 第二个aggs
    对结果进行排序,这里没有排序,只做了截断(分页)

这样就实现了对聚合的结果进行了分页

备注

获取分组后,分了几组(总数),可以再次调用接口查询数据,取查询到数据的个数即可(记得去掉第二的aggs),这是目前想到最笨的办法,如果你有更好的办法可以分享一下呦!

官网:
https://www.elastic.co/guide/en/elasticsearch/reference/6.8/search-aggregations-pipeline-bucket-sort-aggregation.html

  • 4
    点赞
  • 14
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
抱歉,目前 Elasticsearch 最新版本是 7.15.1,还没有发布 8.0 版本。不过 Elasticsearch 在 7.x 版本中已经提供了聚合后再分页的支持。 实现聚合后再分页可以参考以下步骤: 1. 创建一个 SearchRequest 对象,设置索引和搜索条件。 2. 使用 AggregationBuilders 构建聚合条件,比如常见的词项聚合、范围聚合、日期直方图聚合等。 3. 将聚合条件添加到 SearchRequest 对象中。 4. 执行搜索,获取 SearchResponse 对象。 5. 从 SearchResponse 中提取聚合结果。 6. 使用 SearchSourceBuilder 构建分页条件,包括起始位置和每页大小。 7. 将分页条件添加到 SearchRequest 对象中。 8. 执行搜索,获取 SearchResponse 对象。 9. 从 SearchResponse 中提取分页结果。 以下是一个简单的示例代码: ```java SearchRequest searchRequest = new SearchRequest("index_name"); SearchSourceBuilder searchSourceBuilder = new SearchSourceBuilder(); // 构建聚合条件 AggregationBuilder aggregationBuilder = AggregationBuilders.terms("agg_name").field("field_name"); // 将聚合条件添加到搜索请求中 searchSourceBuilder.aggregation(aggregationBuilder); searchRequest.source(searchSourceBuilder); SearchResponse searchResponse = client.search(searchRequest, RequestOptions.DEFAULT); // 获取聚合结果 Terms aggResult = searchResponse.getAggregations().get("agg_name"); // 构建分页条件 searchSourceBuilder.from(0).size(10); // 将分页条件添加到搜索请求中 searchRequest.source(searchSourceBuilder); SearchResponse searchResponse2 = client.search(searchRequest, RequestOptions.DEFAULT); // 获取分页结果 SearchHits hits = searchResponse2.getHits(); ``` 需要注意的是,在 Elasticsearch聚合后再分页需要注意聚合结果的顺序问题,因为分页是在搜索结果返回后进行的,而聚合是在搜索前进行的。如果聚合后进行了排序,则需要在分页时保持相同的排序方式。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值