![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
zhongjinwen
这个作者很懒,什么都没留下…
展开
-
Stinger
Hortonworks 3月发布了其产品 Stinger ,其中最重要的一个特性就是对Hive做了性能优化。测试表明,其速度是原生Hive的45倍。 Stinger 建立在Hadoop2.0基础上,采用了两类技术提高性能:1.Apache Tez:Tez是Apache的一个通用、高可定制的编程框架,可以同时优化对小规模、低延迟和大规模、高吞吐的作业负载的处理过程,效率提升超过Hive和...原创 2013-06-25 23:00:18 · 572 阅读 · 0 评论 -
reahat下tora的安装
安装tora需要先安装oracle client(或者oracle)其次tora的编译还需要安装:qt:包括qscintilla,qscintilla-designer,qscintilla-levellibutempter:包括libutempter,libutempter-devel以上资源可以通过下面的链接获得:http://rpm.pbone.net/index.php3/...原创 2016-03-04 14:39:47 · 213 阅读 · 0 评论 -
hive二级分区
几年前的工作了,放在草稿箱2,3年了,整理一下吧。内容主要是扩展了hive的分区方式,原生的hive支持多字段等值分区,对于很有用的range、hash、list等数据库传统的分区方式不支持,因此这个做了二级的多类分区的扩展。这里只是antlr的定义,显然你还需要在查询、存储层做更多的工作来支持这种分区工作,量还是不小的,我们的工作不具参考性,这里只列一下sql解析的修改,给大家做...原创 2016-03-04 15:43:24 · 1156 阅读 · 0 评论 -
2015impala roadmap
2015impala 发表的论文提到impala的roadmap1.新增SQL支持,包括minus、intersect;rollup和grouping set操作;动态分区裁剪;date、time、datetime类型的支持;增加对structs, arrays, maps等复杂类型的支持。2.性能增强。节点内部的join并行、聚合、排序,以及更为广泛的利用运行时代码生成(LLVM)技术来...原创 2016-03-07 16:58:57 · 226 阅读 · 0 评论