Apache Kylin使用MapReduce构建cube的过程

写在前面:
又来写废话了,草稿箱里放了大半年了,今天写完它。相关资料很多,官方对cube构建过程的解释如下链接:
https://kylin.apache.org/cn/docs/howto/howto_optimize_build.html
自己写一遍能够避免浮躁,走马观花式的学习。
Cuboid的读音:[ˈkjuːbɔɪd]

==================================

kylin在hive中会使用一个叫做kylindb的库

Step #1: Create Intermediate Flat Hive Table

做表关联,做一张关联后的宽表,具体步骤如下:

1.1 根据cube的维度、度量创建中间宽表 kylin_intermediate_cubeA。

DROP TABLE IF EXISTS kylin_intermediate_cubeA;
CREATE EXTERNAL TABLE IF NOT EXISTS  kylin_intermediate_cubeA
(
...
)STORED AS SEQUENCEFILE
LOCATION 'hdfs://reh/kylin/kylin_metadata/kylin-.../kylin_intermediate_cubeA';

1.2 设置中间表属性,删除或覆盖数据时不经过回收站

 
  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值