es中使用group by分组的实现统计不同bikeId的去重操作

在spring boot+springdata+es的代码中使用group by实现去重统计:

public int getDailyLeaseBike2(OperateAreasBo operateArea, String type, String type1, Long stime, Long etime, String queryDateField) {
    BoolQueryBuilder boolQueryBuilder = createBoolQueryBuilder(operateArea, stime, etime, queryDateField);
    boolQueryBuilder.must(QueryBuilders.matchQuery("orderStatus", 300));
    SearchQuery searchQuery = new NativeSearchQueryBuilder()
            .withQuery(boolQueryBuilder)
            .withIndices(ES_INDEX_NAME)
            .withTypes(ES_TYPE_NAME)
            .withSourceFilter(new FetchSourceFilter(new String[]{"bikeId", "id"}, null)) //查询只显示这个字段,两个参数分别是要显示的和不显示的
            .addAggregation(AggregationBuilders .terms("agg_data").field("bikeId").size(100000000))
            .build();
    int bikeLeaseCount = elasticsearchTemplate.query(searchQuery, response -> {
        LongTerms modelTerms = (LongTerms)response.getAggregations().asMap().get("agg_data");
        return   modelTerms.getBuckets().size();

    });
    return bikeLeaseCount;
}

 

  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: 在Elasticsearch6,可以使用terms聚合实现操作。下面是一个Java示例代码: ```java SearchRequest searchRequest = new SearchRequest("your_index"); // 指定索引名称 SearchSourceBuilder searchSourceBuilder = new SearchSourceBuilder(); searchSourceBuilder.size(0); // 只需要聚合结果,不需要返回文档 TermsAggregationBuilder aggregationBuilder = AggregationBuilders.terms("duplicate_count").field("your_field"); // 指定需要去的字段 searchSourceBuilder.aggregation(aggregationBuilder); searchRequest.source(searchSourceBuilder); SearchResponse searchResponse = restHighLevelClient.search(searchRequest, RequestOptions.DEFAULT); Terms terms = searchResponse.getAggregations().get("duplicate_count"); List<? extends Terms.Bucket> buckets = terms.getBuckets(); for (Terms.Bucket bucket : buckets) { String key = bucket.getKeyAsString(); // 去后的值 long docCount = bucket.getDocCount(); // 该值出现的文档数量 // TODO: 处理聚合结果 } ``` 其,`your_index`为需要进行去操作的索引名称,`your_field`为需要去的字段名称,可以根据实际情况进行修改。在处理聚合结果时,可以根据需要进行进一步的处理。 ### 回答2: 在使用Java操作Elasticsearch6实现操作时,我们可以通过以下步骤实现: 1. 创建Elasticsearch的连接和初始化客户端。 例如,我们可以使用以下代码创建和初始化客户端: ```java RestHighLevelClient client = new RestHighLevelClient( RestClient.builder(new HttpHost("localhost", 9200, "http"))); ``` 2. 使用Elasticsearch的搜索API进行去操作。 可以使用Elasticsearch的搜索API来查询需要去的字段,并通过聚合操作筛选出唯一的值。具体步骤如下: ```java // 创建一个SearchRequest对象 SearchRequest searchRequest = new SearchRequest("your_index_name"); // 创建一个SearchSourceBuilder对象,并设置聚合操作 SearchSourceBuilder sourceBuilder = new SearchSourceBuilder(); sourceBuilder.aggregation(AggregationBuilders .terms("unique_values").field("your_field_name").size(10000)); // 将SearchSourceBuilder对象设置到SearchRequest searchRequest.source(sourceBuilder); // 执行搜索操作 SearchResponse response = client.search(searchRequest, RequestOptions.DEFAULT); // 从响应获取聚合结果 Terms agg = response.getAggregations().get("unique_values"); // 遍历聚合结果并输出唯一值 for (Terms.Bucket bucket : agg.getBuckets()) { System.out.println("Unique value: " + bucket.getKeyAsString()); } ``` 在上述代码,我们创建了一个SearchRequest对象,并指定了需要进行去的字段。然后,我们创建了一个SearchSourceBuilder对象,并使用aggregation方法设置了聚合操作。最后,我们执行搜索操作并从响应获取聚合结果。 以上就是使用Java操作Elasticsearch6实现操作的简要步骤。根据具体需求,我们可以通过调整代码来实现更复杂的去逻辑。 ### 回答3: Java操作Elasticsearch6实现操作主要依赖于Elasticsearch Java High Level REST Client,以下是一个简单实现的步骤: 1. 首先,我们需要创建一个Elasticsearch的客户端连接: ```java RestHighLevelClient client = new RestHighLevelClient( RestClient.builder(new HttpHost("localhost", 9200, "http"))); ``` 2. 接下来,我们可以使用Search API来实现操作。首先,我们需要创建一个SearchRequest对象并设置索引名称和搜索条件: ```java SearchRequest searchRequest = new SearchRequest("index_name"); SearchSourceBuilder searchSourceBuilder = new SearchSourceBuilder(); searchSourceBuilder.query(QueryBuilders.matchAllQuery()); // 设置查询条件 searchSourceBuilder.aggregation(AggregationBuilders .terms("deduplication") .field("field_name") .size(10000)); // 设置去字段和聚合大小 searchRequest.source(searchSourceBuilder); ``` 3. 然后,我们可以发送搜索请求来获得去后的结果: ```java SearchResponse searchResponse = client.search(searchRequest, RequestOptions.DEFAULT); Terms aggregation = searchResponse.getAggregations().get("deduplication"); for (Terms.Bucket bucket : aggregation.getBuckets()) { String fieldValue = bucket.getKey().toString(); System.out.println("Deduplicated Field Value: " + fieldValue); } ``` 在上述代码,我们通过聚合操作(aggregation)的terms功能来实现使用聚合将结果按照指定字段(field_name)分组,然后获取每个分组的聚合结果(deduplication)。 以上是使用Java操作Elasticsearch6实现操作的简单示例。请注意,具体的实现可能根据实际需求有所调整。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值