![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
kylin
weiha666
Geeker
展开
-
kylin cube 构建优化
随着维度数目的增加,Cuboid 的数量会爆炸式地增长。为了缓解 Cube 的构建压力,Apache Kylin 引入了一系列的高级设置,帮助用户筛选出真正需要的 Cuboid。这些高级设置包括聚合组(Aggregation Group)、联合维度(Joint Dimension)、层级维度(Hierachy Dimension)、必要维度(Mandatory Dimension)和衍生维度(De...原创 2019-12-27 17:18:59 · 344 阅读 · 0 评论 -
通过生成大宽表来优化kylin的cube构建
Kylin将Cube构建任务分解为几个依次执行的步骤,这些步骤包括Hive操作、MapReduce操作和其他类型的操作。如果你有很多Cube构建任务需要每天运行,那么你肯定想要减少其中消耗的时间。本文的优化主要是讲kylin对于join连接性能差,需要通过hive 把各数据源join,生成一个中间表(大宽表,把需要的数据都关联到一个表,可以设计成分区表,增量刷新),然后kylin直接以此表作为数据...原创 2019-12-27 16:33:46 · 683 阅读 · 0 评论