Kylin 参数优化经验

目录

 

优化前

OOM

执行时间过长

---

优化前

kylin执行构建如果因为OOM等原因运行失败后，调整配置参数，无需从头开始构建，kylin有个牛x的功能叫恢复执行，可以从失败的阶段开始重新执行，笔者之前不知道有这个功能，都是重头开始构建，执行到失败的步骤运行时间又很长，试错成本特别高。

OOM

Build Cube with Spark阶段OOM

设置参数 kylin.engine.spark-conf.spark.yarn.executor.memoryOverhead=10500 解决问题。

其他配置参数

前缀	影响范围	说明
kylin.source.hive.config-override.	Create Intermediate Flat Hive Table Redistribute Flat Hive Table	调整Hive作业的参数，一般不需要修改
kylin.engine.mr.uhc-config-override.	Build UHC Dictionary	一般不需要修改
kylin.engine.mr.base-cuboid-config-override.	Build Base Cuboid	如果Cube有