Kettle

遇到问题	解决方案
1. 从kettle插入的数据由 ‘’ 变成了 null
2. 同样的sql在hive查和在kylin查结果不一致	将model和cube重新建
3. cube构建第二步时间过长	由于文件大小不均匀导致的。 kylin.source.hive.redistribute-flat-table = false
4. cube的Planner过多	提高组合效益比阈值，默认0.01 kylin.cube.cubeplanner.bpus-min-benefit-ratio 0.2
5. kylin报oom	1、适当加大map端或者reduce端内存大小。 kylin.engine.mr.config-override.mapreduce.map.memory.mb 16384，kylin.engine.mr.config-override.mapreduce.reduce.memory.mb 8192 2、从 Yarn 获得更多内存 kylin.engine.mr.config-override.mapreduce.map.java.opts -Xmx15g kylin.engine.mr.config-override.mapreduce.reduce.java.opts -Xmx7g
6. 构建超时	1、增加HBase 客户端发起一次 scan 操作的 RPC 调用至得到响应之间总的超时时间，默认值为 10000(ms) kylin.metadata.hbase-client-scanner-timeout-period：600000 2、增加 HBase 执行 RPC 操作的超时时间，默认值为 5000(ms) kylin.metadata.hbase-rpc-timeout：600000
7. 构建rowkey报长度不够的错	hbase.client.keyvalue.maxsize 524288000
8.批量执行	rewriteBatchedStatements=true