tez
文章平均质量分 81
12345677654321000000
这个作者很懒,什么都没留下…
展开
-
hive on tez安装
版本:hadoop2.7.2+hive1.2.1+tez0.8.41.下载tez src解压并编译,最好用非root用户,有可能有些资源下载不下来,需要翻墙。。。orz。。。mvn clean package -DskipTests=true -Dmaven.javadoc.skip=true2.编译成功后,在tez-dist/target目录下,能够发现如原创 2016-08-18 10:42:50 · 6770 阅读 · 5 评论 -
tez中的brocast join
最近在使用tez的过程中发现,tez中提供了类似于hive on mr中的mapjoin的操作,叫做brocast join。对于小表join大表有很好的效果。 看例子: set hive.execution.engine=tez;set hive.convert.join.bucket.mapjoin.tez=true; set hive.auto.conv原创 2016-09-14 15:08:31 · 2373 阅读 · 0 评论 -
tez-ui安装
1.hadoop集群中需要启动timelineserver需要注意的是,除了正常的配置之后,启动t的时候,这个参数也必须设置为true Enables cross-origin support (CORS) for web services where cross-origin web response headers are needed. For example, jav原创 2016-08-18 11:51:43 · 3581 阅读 · 1 评论 -
tez hive llap安装
版本 hive2.1.0 + hadoop2.7.2 + tez0.8.4 hive llap 是基于tez的一种近实时查询方案。我用的是apache版的,所以第一步是需要对hive和tez进行编译,以使他们的版本适配。测试中发现,如果要想使用hive llap,则hive和tez版本必须基于正确的版本编译。软件编译工作:hive安装下载hive2.1.0源码,修改pom.xml ,将hadoop.原创 2017-06-12 11:12:02 · 5787 阅读 · 5 评论