1、 偏析函数
①leg(exp_str, offset,defavl) over() 向上偏析
exp_str : 偏析的字段
offset:偏析量
defavl:偏析后的填充值,若为指定,则用NULL填充
2、HiveQL与SQL区别
①Hive不支持等值连接
•SQL中对两表内联可以写成:
•select * from dual a,dual b where a.key = b.key;
•Hive中应为
•select * from dual a join dual b on a.key = b.key;
2、分号字符
分号是SQL语句结束标记,在HiveQL中也是,但是在HiveQL中,对分号的识别没有那么智慧
select concat(key,concat(';',key)) from dual;
但HiveQL在解析语句时提示:
FAILED: Parse Error: line 0:-1 mismatched input '<EOF>' expecting ) in function specification
解决的办法是,使用分号的八进制的ASCII码进行转义,那么上述语句应写成:
select concat(key,concat('\073',key)) from dual;
3、IS [NOT] NULL
SQL中null代表空值, 在HiveQL中String类型的字段
若是空(empty)字符串, 即长度为0, 那么对它进行IS NULL的判断
结果是False.
4、Hive不支持将数据插入现有的表或分区中,
仅支持覆盖重写整个表
INSERT OVERWRITE TABLE t1
SELECT * FROM t2;
5、hive不支持INSERT INTO 表 Values(), UPDATE, DELETE操作
6、hive支持嵌入mapreduce程序,来处理复杂的逻辑
7、hive支持将转换后的数据直接写入不同的表,还能写入分区、hdfs和本地目录
这样能免除多次扫描输入表的开销。