HIVE
文章平均质量分 93
IT路上的苦行僧
这个作者很懒,什么都没留下…
展开
-
Hive 调优
目录改写SQL实现使用grouping sets代替union分解count(distinct)使用SQL-Hint 语法MAPJOIN HintSTREAMTABLEHive配置开关并行执行向量开关参考文章改写SQL实现使用grouping sets代替union-- 优化前SELECT s_age,s_sex,count(1) FROM...原创 2020-01-23 16:05:53 · 444 阅读 · 0 评论 -
HIVE执行计划(未完)
目录语法基本信息扩展信息依赖信息授权信息参考文章语法EXPLAIN [EXTENDED|CBO|AST|DEPENDENCY|AUTHORIZATION|LOCKS|VECTORIZATION|ANALYZE] queryAUTHORIZATION从 HIVE 0.14.0 通过HIVE-5961开始支持,VECTORIZATION从 Hive 2.3....原创 2020-01-22 18:40:37 · 548 阅读 · 0 评论 -
Hive 面试题总结
目录排序分组类JOIN类窗口函数类参考文章排序类1、有1亿个用户,存储在表users中,包含用户uid、用户年纪age、用户消费总金额total,其中以uid唯一标识1个用户,按照用户年龄从大到小排序,如果年龄相同则以消费总金额从小到大排序。这是1个全排序问题,首先预估总内存消耗大小,1亿[用户数]*(8B[uid]+4B[age]+8B[total])约等于2G,...原创 2020-01-21 15:38:24 · 1844 阅读 · 0 评论