进阶-第47__深入聚合数据分析_cardinality算法之优化内存开销以及HLL算法

本文探讨了在Elasticsearch中使用Cardinality API进行数据聚合时如何优化内存开销和提高性能,重点关注precision_threshold参数的作用以及HyperLogLog++ (HLL)算法。通过调整precision_threshold值,可以在保证一定准确率的同时减少内存消耗。此外,通过在建立索引时预先计算hash值,可以进一步优化查询性能。
摘要由CSDN通过智能技术生成

 

Cardinality 实际上就是做count(distinct)但是cardinality有5%的错误率,但是性能在100ms左右

 

1、precision_threshold优化准确率和内存开销

 

GET /tvs/sales/_search

{

    "size" : 0,

    "aggs" : {

        "distinct_brand" : {

            "cardinality" : {

              "field" : "brand",

              "precision_threshold" : 100 //默认值是100

            }

        }

    }

}

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值