Apache Kylin v2.0.0 beta 发布(来自官网)

Apache Kylin社区非常高兴地宣布 v2.0.0 beta package 已经可以下载并测试了。

自从v1.6.0版本发布已经2个多月了。这段时间里,整个社区协力开发完成了一系列重大的功能,希望能将Apache Kylin提升到一个新的高度。

非常欢迎大家下载并测试 v2.0.0 beta。您的反馈对我们非常重要,请发邮件到 dev@kylin.apache.org


安装

暂时 v2.0.0 beta 无法从 v1.6.0 直接升级,必需全新安装。这是由于新版本的元数据并不向前兼容。好在 Cube 数据是向前兼容的,因此只需要开发一个元数据转换工具,就能在不久的将来实现平滑升级。我们正在为此努力。


运行 TPC-H 基准测试

在 Apache Kylin 上运行 TPC-H 的具体步骤: https://github.com/Kyligence/kylin-tpch


Spark 构建引擎

Apache Kylin v2.0.0 引入了一个全新的基于 Apache Spark 的构建引擎。它可用于替换原有的 MapReduce 构建引擎。初步测试显示 Cube 的构建时间一般能缩短到原先的 50% 左右。

启用 Spark 构建引擎:

  • 仔细检查 kylin.properties 中的 Spark Engine Configs 部分。
    • 确保指定的 HADOOP_CONF_DIR 目录中包含 core, yarn, hive, 和 hbase 的 site xml。
    • 根据集群的具体配置调整 Spark executor instances, cores, 和 memory。
    • 测试中 Hive on Tez 会遇到问题,切换到 Hive on MR 可以绕过。
  • 在创建新 Cube 时,在“高级”配置中选用 Spark 构建引擎即可。

感谢每一位朋友的参与和贡献!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值