Hive
amyacker
这个作者很懒,什么都没留下…
展开
-
Java通过JDBC操作Hive
连接前请确保hive开了远程服务连接驱动import java.sql.Connection;import java.sql.DriverManager;import java.sql.Statement;public class HiveJDBCUtils { private static String driverName = "org.apache.hive.jdbc.Hi...原创 2019-02-26 12:15:55 · 3385 阅读 · 0 评论 -
Hbase 映射 Hive
Hive内部表没被external关键字修饰,数据由Hive自身管理,hive drop掉此表时,hbase也被dropcreate TABLE hiveTableName( key string, name string)STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' WITH...原创 2019-03-20 15:49:21 · 219 阅读 · 0 评论 -
Hive 一些操作记录
无效ID在关联时的数据倾斜问题解决方法:函数过滤 null把空值的id变成一个字符串加上随机数,就能把倾斜的数据分到不同的Reduce上,从而解决数据倾斜问题。因为空值不参与关联,即使分到不同 的 Reduce 上,也不会影响最终的结果。SELECT * FROM tableName1 a LEFT OUTER JOIN tableName2 b ON CASE WHEN a.id ...原创 2019-03-12 10:23:26 · 631 阅读 · 0 评论