kylin的存储目录,及对应生成的cubeid的分析

  1. kylin的存储在hdfs的文件路径:/kylin/

查看命令:hadoop fs -du -h /kylin/

          hadoop fs -du -h /kylin/kylin_testing/

目录如下:

          /kylin/ proj 1--对公的cube的存储目录

          /kylin/ proj2 --零售的cube的存储目录

          /kylin/resources---构建精确去重的cube时候的全局字典的存储位置

          kylin/resources-jdbc--快照的存储的位置

Eg:/kylin/proj目录结构:

/kylin/ proj/kylin-*   --中间表

/kylin/ proj/parquet/  --cubeId对应的存储空间

/kylin/ proj/sparder/   --无用字典

/kylin/ proj/table_stats  --lookup快照和镜像

-------------------------------------------------------------------------------------------------------------------------------

kyligence命令:

./bin/kylin.sh org.apache.kylin.engine.mr.common.CubeStatsReader cubeName-*开源分析*-

./kylin.sh io.kylihence.kap.tool.storage.KapGarbageCleanupCLI [--delete true] -*垃圾清理*-

./kylin.sh io.kyligence.kap.tool.metadata.MetadataCheceker check -*核查数据是否一致*-

./kylin.sh io.kyligence.kap.tool.metadata.MetadataCheceker recovery -*删除孤立源*-

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值