hive
文章平均质量分 74
xqy1522
这个作者很懒,什么都没留下…
展开
-
hive源码结构分析(编译器)
本文转自:http://samuschen.iteye.com/blog/860809 Hive 是将 SQL 语句转换成 hadoop 的 MapReduce 程序,通常在客户端执行 hive 命令,然后输入 SQL 语句后, hive 将 SQL 语句生成多个 MR 的 j原创 2011-09-01 17:22:13 · 1967 阅读 · 0 评论 -
hive 参数设定
本文转自:http://www.oschina.net/question/12_9024 开发Hive应用时,不可避免地需要设定Hive的参数。设定Hive的参数可以调优HQL代码的执行效率,或帮助定位问题。然而实践 中经常遇到的一个问题是,为什么设定的参数没有起作用?转载 2011-09-02 15:09:02 · 1780 阅读 · 0 评论 -
hive mapjoin使用
今天遇到一个hive的问题,如下hive sql: select f.a,f.b from A t join B f on ( f.a=t.a and f.ftime=20110802) 该语句中B表有30亿行记录,A表只有100行记录,而且B表中数原创 2011-08-18 22:15:58 · 55032 阅读 · 1 评论 -
hive DDL锁(一)
我们目前使用的hive 元数据存储在mysql中,最近在使用过程中发现,如果对同一个对象(表)并发的进行ddl操作(例如:drop partition或者add partition)时会出现冲突,有时候表现为ddl语句报错,更有圣着有的DDL语句返回成功,但是实际上没有执行成功。原创 2011-08-18 22:32:03 · 3986 阅读 · 0 评论 -
Hive-0.5中UDF和UDAF简述
本文转自:http://blog.csdn.net/dajuezhao/article/details/5753001 一、UDF 1、背景:Hive是基于Hadoop中的MapReduce,提供HQL查询的数据仓库。Hive是一个很开放的系统,很多内容都支持用户定制,包括: a)文件格式:Text File,Sequence File b)内存中的数据格式: Java Integ转载 2012-03-20 13:58:32 · 894 阅读 · 0 评论