Apache Kylin
hankl1990
show me the code
展开
-
Apache Kylin 之 初介绍
转子:http://www.cnblogs.com/huajiezh/p/6020880.html大数据分析神兽麒麟(Apache Kylin)1.Apache Kylin是什么?在现在的大数据时代,越来越多的企业开始使用Hadoop管理数据,但是现有的业务分析工具(如Tableau,Microstrategy等)往往存在很大的局限,如难以水转载 2017-09-25 14:06:43 · 724 阅读 · 0 评论 -
kylin之 java
http://www.cnblogs.com/sh425/p/5848935.htmlimport java.io.BufferedReader;import java.io.InputStream;import java.io.InputStreamReader;import java.io.OutputStream;import java.net.HttpURLConnec转载 2017-12-13 18:21:12 · 325 阅读 · 0 评论 -
Apache Kylin高级部分之JDBC访问方式
转:http://blog.csdn.net/jiangshouzhuang/article/details/53823234Kylin提供了标准的ODBC和JDBC接口,能够和传统BI工具进行很好的集成。分析师们可以用他们最熟悉的工具来享受Kylin带来的快速。本章节介绍通过Java程序调用Kylin的JDBC接口访问Kylin的Cube数据。首先我们来看一下连接Kyli转载 2017-11-14 11:03:05 · 275 阅读 · 0 评论 -
《Apache Kylin将curl方式改为httpclient方式调用Restful API》
转:http://blog.csdn.net/BlackEnn/article/details/528799891.httpclient方式调用Kylin Resetful API[java] view plain copy "code" class="java"> static String encoding; String转载 2017-11-14 10:42:55 · 1087 阅读 · 0 评论 -
kylin官方给出的优化 以及各个步骤容易出现的问题
转:http://blog.csdn.net/qqpy789/article/details/774799981.使用和hive相同的partition cloumn关闭自动合并设置 hive.merge.mapfiles false Disable Hive's auto merge2.重新分布中间表作用:防止不均匀默认是100W一个文件,你可以通过conf/kyli转载 2017-10-12 13:50:09 · 1157 阅读 · 0 评论 -
Kylin 之对大数据量的多维分析
转 :http://tech.meiyou.com/?p=97一、Kylin简介Apache Kylin(http://kylin.apache.org/cn/)是一个开源的分布式分析引擎,提供Hadoop之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由eBay 开发并贡献至开源社区。它能在亚秒内查询巨大的Hive表。1、kylin的总体架构Ky转载 2017-10-12 13:46:07 · 2868 阅读 · 0 评论 -
Kylin 的优化以及使用总结
转:http://www.cnblogs.com/hark0623/p/5521006.htmlApache Kylin对传统MOLAP的改进 计算Cube的存储代价以及计算代价都是比较大的, 传统OLAP的维度爆炸的问题Kylin也一样会遇到。 Kylin提供给用户一些优化措施,在一定程度上能降低维度爆炸的问题: Cube 优化:Hierachy转载 2017-10-11 18:18:13 · 2088 阅读 · 0 评论 -
关于Kylin结果缓存
http://blog.csdn.net/yu616568/article/details/51870953Apache Kylin定位是大数据量的秒级SQL查询引擎,原理是通过预计算所有可能的维度组合存储在Hbase中,查询时解析SQL获取维度和度量信息,然后再从hbase中扫描获取数据返回,个人认为Kylin最强大的地方在于实现了SQL引擎,如果使用自定义的格式化查询语言也可以完成相应转载 2017-09-25 16:34:43 · 564 阅读 · 0 评论 -
【Kylin】Kylin中的cube构建
http://blog.csdn.net/yu616568/article/details/50365240前言 在使用Kylin的时候,最重要的一步就是创建cube的模型定义,即指定度量和维度以及一些附加信息,然后对cube进行build,当然我们也可以根据原始表中的某一个string字段(这个字段的格式必须是日期格式,表示日期的含义)设定分区字段,这样一个cube就可转载 2017-09-25 16:32:16 · 245 阅读 · 0 评论 -
Kylin Cube构建过程优化
http://blog.csdn.net/skyyws/article/details/54923630原文地址:https://kylin.apache.org/docs16/howto/howto_optimize_build.htmlKylin将一个cube的build过程分解为若干个子步骤,然后串行执行这些子步骤。这些步骤包括Hive操作,MR任务和其他类型的工作。如果每天都有转载 2017-09-25 16:30:15 · 263 阅读 · 0 评论 -
Kylin实践之使用Hive视图
http://blog.csdn.net/yu616568/article/details/50548967为什么需要使用视图 Kylin在使用的过程中使用hive作为cube的输入,但是有些情况下,hive中的表定义和数据并不能满足分析的需求,例如有些列的值需要进行处理,有些列的类型不满足需求,甚至有时候在创建hive表时为了图方便,hive中的所有列都被定义成了st转载 2017-09-25 16:29:15 · 241 阅读 · 0 评论 -
Kylin使用之创建Cube和高级设置
http://blog.csdn.net/yu616568/article/details/50570536简介 Kylin作为一个OLAP引擎,需要Cube模型支撑,在我们的工作过程中,在和用户以及相关的开发人员、测试、产品等介绍Kylin的过程中,他们总是会对Cube的模型有一些疑惑,作为经常接触这个概念的我来说这是再明了不过的了,而他们还是会在我讲解多次之后表示还在云里雾里转载 2017-09-25 16:27:25 · 272 阅读 · 0 评论 -
Kylin源码解析——Cube构建过程中如何实现降维
http://blog.csdn.net/qq_21653785/article/details/73731001维度简述Kylin中Cube的描述类CubeDesc有两个字段,rowkey和aggregationGroups。@JsonProperty("rowkey")private RowKeyDesc rowkey;@JsonProperty("aggregation转载 2017-09-25 16:25:28 · 201 阅读 · 0 评论 -
Kylin执行查询流程分析
转自:http://blog.csdn.net/yu616568/article/details/50838504Kylin基于MOLAP实现,查询的时候利用Calcite框架,从存储在Hbase的segment表(每一个segment对应着一个htable)获取数据,其实理论上就相当于使用Calcite支持SQL解析,数据从Hbase中读取,中间Kylin主要完成如何确定从Hbase中的转载 2017-09-25 16:22:59 · 944 阅读 · 0 评论 -
Kylin Cube 创建教程
直接从官网拿过来的:http://kylin.apache.org/cn/docs15/tutorial/create_cube.htmlI. 新建一个项目由顶部菜单栏进入Query页面,然后点击Manage Projects。点击+ Project按钮添加一个新的项目。填写下列表单并点击submit按钮提交请求。成功后,底部转载 2017-09-25 15:43:06 · 526 阅读 · 0 评论 -
Apache Kylin安装配置及使用示例
转子:http://blog.csdn.net/xgjianstart/article/details/53289870Apache Kylin是一个开源的分布式分析引擎,提供Hadoop之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由eBay 开发并贡献至开源社区。它能在亚秒内查询巨大的Hive表。Kylin OLAP引擎基础框架,包括元数据(转载 2017-09-25 15:38:01 · 5404 阅读 · 0 评论 -
kylin之java02
http://www.cnblogs.com/sh425/p/5848949.html通常是用于增量package com.dlht.kylinDemo; import java.io.BufferedReader;import java.io.FileNotFoundException;import java.io.IOException;import j转载 2017-12-13 18:22:47 · 171 阅读 · 0 评论