Apache druid Roll-up前后的数据量对比sql,见证roll-up的强大

简述

Roll-up 是Apahce druid 中重要的特性之一,在特定时间段内的数据,维度一致时可以进行压缩合并。减少数据量。
但有时为了估算压缩前后数据量如何查询呢?
在druid 中默认提供了sum函数可以统计压缩前的数据量。
下面来看下语法如何写吧。

Roll-up前后的数据量对比sql

SELECT SUM("count") as "roll-up前" ,COUNT(*) as " roll-up后" FROM table_name

查询效果
在这里插入图片描述
由于上面的维度值较多,roll-up效果 只做到了 7%的效果。来看下另一个
在这里插入图片描述
这个压缩比非常可观了。roll-up前近13亿数据,roll-up后只有140W,只有千分之一了。

总结

roll-up是apache druid 进行海量数据运算的法宝之一。根据自己需要的属性进行提取建表,可以大大的减少数据量,提升数据查询能力。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值