kylin预处理结果分析

kylin提供了一个简单的工具让用户查看构建出来的cubeID及分布情况,下面是查看的两个命令。

命令:

./kylin.sh org.apache.kylin.cube.CubeStatsReader cubeName   -*cube分析*-[kyligence企业版本的分析]

bin/kylin.sh org.apache.kylin.engine.mr.common.CubeStatsReader cubeName-*开源分析*-[开源版本的分析]

最终的执行结果如下图所示:

内容解释如下:

total cubeId 生成的总的cubeId的数量
total estimated rows 181644总的数据行数

length of xx 4 ,xx代码维度字段,4代表在rowkey设置的时候的长度
total estimated size(MB) 总的文件大小
cubeId中的1或者0代表是否包含某一个维度,对应的维度可以通过
rowkey知道,某一个CubeId包含哪些维度组成的
可以看到后台打印出来的cubeId呈现一个树形结构分布,因为每一个孩子都是由父节点进一步聚合汇总得到的;每一个分析的第一个cubeId对应的都是baseCubeId,包含所有的维度。
分析
est row 是对应的cubeid的条数
est MB 是对应的大小
shrink是下节点的福节点的比值,这个值是一个预估计值,可能存在大于100%的情况

基于这些分析具体的实践作用:

1、预计算的的结果是否按照预期的都实现了。

2、基于这个可以分析,查询命中的cubeId是不是最好的。

3、可以查看每每一个cube的大小,针对查询所需要的引擎的参数的配置;

 

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值