elasticsearch 聚合操作分组查询 并列分组在通过其他字段求sum 排序 并列分组效果类似于 Mysql中的(Select A,B from 表名 group by A,B)

需求

有三个字段 需要把A字段和B字段结合起来 共同分组

用Mysql 写的话 就相当一是
Select A,B from 表名 group by A,B

但是在elasticsearch 的查询中分组都是 :

Aggregation(中文意思:聚合)关键字进行聚合分组,然后是最关键的,多个group by不能使用并列Aggregation,必须使用嵌套聚合,采用subAggregation进行嵌套!!

TermsAggregationBuilder agg_top_elapsed_time_by_application =
 AggregationBuilders.terms("xxxxxxxxx").field("你在ES 的字段名字")
.subAggregation(AggregationBuilders.sum("xxxxxx").field("你在ES 的字段名字"));

在Java Api 里面只能这样嵌套查询不能说把这两个分组并列
在kibana 的语法中是可以使用脚本去把我们想要的group by 给结果 如下

GET /{索引名}/_search
{
    "size": 0,
    "query": {
        "match_all": {}
    },
    "aggs": {
        "sexprof": {
            "terms": {
                "script": {
                   "inline": "doc['destination_port'].value +'-split-'+ doc['protocol_id'].value"
                }
            }
        }
    }
}

结果
在这里插入图片描述
接下来就是调用Java Api 来查询了 网上说要更改YML 配置的都是假的最后是查看官方给的Api 才发现官方早就停止使用groovy 所以用的painless
代码如下

 //	 // 把A,B放到一个分组 这里如果是7版本的ES 需要在字段的后面加上类型
        Script script = new Script(ScriptType.INLINE,"painless", "doc['A'].value+'-'+doc['B'].value",new HashMap<String, Object>());
        AggregationBuilder aggregationBuilderCount = AggregationBuilders.terms("定义名字").script(script).order(BucketOrder.count(false)).size(3).subAggregation(protocolIDTerm);

结果如下
在这里插入图片描述
整体代码

 		String indexName = "xxxxxx";
        SearchRequest searchRequest = new SearchRequest(indexName);
        SearchSourceBuilder searchSourceBuilder = new SearchSourceBuilder();
        searchSourceBuilder.size(0);
		 // 把A,B放到一个分组 这里如果是7版本的ES 需要在字段的后面加上类型
        Script script = new Script(ScriptType.INLINE,"painless", "doc['A'].value+'-'+doc['B'].value",new HashMap<String, Object>());
 AggregationBuilder aggregationBuilderCount = AggregationBuilders.terms("你定义名字").script(script).order(BucketOrder.count(false)).size(3).subAggregation(protocolIDTerm);

        searchSourceBuilder.aggregation(aggregationBuilderCount);
        searchRequest.source(searchSourceBuilder);
        //
        SearchResponse response = client.search(searchRequest, RequestOptions.DEFAULT);
        Aggregations aggregations = response.getAggregations();
        Terms aggregation = aggregations.get("你定义名字");
        List<? extends Terms.Bucket> list = aggregation.getBuckets();
        list.stream().forEach(prot -> {
           System.out.println("======= 端口 " + prot.getKey() + ":" + prot.getDocCount() + "==============");
        });
  • 2
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
可以使用 Elasticsearch Java API 的 Aggregation API 来实现聚合查询某一字段分组的数量。具体步骤如下: 1. 创建一个 SearchRequest 对象,并设置索引及查询条件: ``` SearchRequest searchRequest = new SearchRequest("index_name"); SearchSourceBuilder searchSourceBuilder = new SearchSourceBuilder(); searchSourceBuilder.query(QueryBuilders.matchAllQuery()); ``` 2. 创建一个 TermsAggregationBuilder 对象,并设置聚合字段: ``` TermsAggregationBuilder aggregationBuilder = AggregationBuilders.terms("group_by_field") .field("field_name") .size(10); // 设置返回结果的数量 ``` 3. 将聚合对象添加到 SearchSourceBuilder : ``` searchSourceBuilder.aggregation(aggregationBuilder); ``` 4. 执行查询,并处理返回结果: ``` searchRequest.source(searchSourceBuilder); SearchResponse response = client.search(searchRequest, RequestOptions.DEFAULT); Terms termsAggregation = response.getAggregations().get("group_by_field"); for (Terms.Bucket bucket : termsAggregation.getBuckets()) { String key = bucket.getKeyAsString(); long count = bucket.getDocCount(); System.out.println("Key: " + key + ", Count: " + count); } ``` 以上代码,`client` 是一个 Elasticsearch 客户端对象,通过 `response.getAggregations().get("group_by_field")` 获取到聚合结果对象,然后遍历 Buckets 获取每个分组的 key 和 count。 需要注意的是,这里使用的是 TermsAggregationBuilder 对象来实现分组聚合查询,如果需要根据其他条件进行聚合查询,则需要使用其他类型的 AggregationBuilder 对象。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值