hive
积极流年
这个作者很懒,什么都没留下…
展开
-
Hive基础(join原理和机制,join的几种类型,数据倾斜简单处理)
<h2> 一,Hive中join的原理和机制 Hive中的Join可分为Common Join(Reduce阶段完成join)和Map Join(Map阶段完成join)。 Hive Common Join 如果不指定MapJoin或者不符合MapJoin的条件,那么Hive解析器会默认把执行Common Join,即在Reduce阶段完成join。整个过程包含Map、Sh...原创 2020-12-22 15:40:37 · 500 阅读 · 0 评论 -
hive 复制一天的数据到一年内的每月同一天
日期转换并减一个月 select from_unixtime(unix_timestamp(add_months(from_unixtime(unix_timestamp('2020-06-19', 'yyyy-MM-dd'), 'yyyy-MM-dd HH:mm:ss'), -1), 'yyyy-MM-dd'),'yyyy-MM-dd') 查出表字段 hive -n xx -p pp -e "describe formatted db.tb" | awk '{print $2}' ..原创 2020-08-19 21:04:06 · 544 阅读 · 0 评论