Kylin
Ronney-Hua
这个作者很懒,什么都没留下…
展开
-
Kylin下构建Cube第一步出错:shell-init: error retrieving current directory
问题背景: 生产环境部署的Kylin-2.1,官方发布的最新安装包并不支持更改hbase存储的namespace,修改源码后重新打包部署过程中,build cube第一步出错大概错误信息是:OS command error exit with 5 – hive -e "USE default;DROP TABLE IF EXISTS kylin_intermediate_kylin_sales_原创 2017-10-31 23:36:56 · 1902 阅读 · 0 评论 -
Kylin 2.0升级总结
文章转载,原文地址:https://blog.bcmeng.com/post/kylin-upgrade.html #6-给kylin社区的建议 引用于个人自查、学习Kylin 2.0的升级节奏 升级的大原则 升级的目标 1 Kylin 2.0 升级流程 1.1 Kylin 2.0 代码合入 1.2 配置更新和梳理 1.3 兼容性测试 1.4 Cube构建测试 1.5 Cube转载 2017-11-01 17:40:27 · 2137 阅读 · 0 评论 -
Kylin修改默认hbase namespace命名空间default的解决方案
问题及背景:同一用户的三家公司的物理集群合并,合并后用dataspace+kerberos控制不同公司对集群资料的访问权限,三家公司分别使用独立的kerberos票据访问,特定的namespace,而生产环境部署的kylin-2.0/2.1只能保存cuboid到hbase 的 default namespace。解决的过程及方案: 1、经多方查找发现, Kylin源码github项目,最新的mas原创 2017-11-02 20:16:04 · 2731 阅读 · 0 评论 -
Kylin启动异常:java.lang.outofMemoryError:Requested array size exceeds VM limit
问题背景: 1、在Kylin里跑一个较大的cube,其中这个cube是一个大表事实表,关联两张维度表,在第三步: Extract Fact Table Distinct 报错,查看Mapreduce的执行过程,发现其中有4个Reduce执行失败,失败的报错是内存溢出,多次调大reduce的内存以后 ,Kylin闪退。 2、多次启动kylin以后,查看kylin.out 报 Dumping hea原创 2017-10-17 14:23:24 · 2694 阅读 · 1 评论 -
Overwriting conflict when i load table from hive
When you run the sample.sh, it actually does two things. One is to generate a few tables in Hive, another one is to generate the table metadata in Kylin's learn_kylin project which is saved in the原创 2018-01-02 13:01:48 · 347 阅读 · 0 评论 -
使用Kylin导入JDBC数据源遇到的问题
一、目标: 直接使用Mysql数据作为Kylin数据源 二、参考官方配置 JDBC 数据源 准备 Sqoop Kylin 使用 Apache Sqoop 从关系型数据库加载数据到 HDFS。在与 Kylin 同一个机器上下载并安装最新版本的 Sqoop。我们使用 SQOOP_HOME 环境变量指出在本指南中 Sqoop 的安装路径。 准备 JDBC driver 需要下载您数据库的 J...原创 2018-08-14 16:47:19 · 4963 阅读 · 2 评论