- 博客(3)
- 收藏
- 关注
原创 presto-csdn
[TOC] 文档问题catalog在哪里设置?重要语句 语句 说明 show catalogs 显示catalog show session 查看当前session的主要属性 语法对比整理 hive presto 说明 select my_array[1] select my_array[CARDINALITY(my_array)] SQL中的下标运算符
2016-09-29 11:58:32
393
原创 Hive-hive.groupby.skewindata配置相关问题调研
使用hive的过程中,我们习惯性用set hive.groupby.skewindata=true来避免因数据倾斜造成的计算效率问题,但是每个设置都是把双刃剑,最近调研了下相关问题,现总结如下: 从下表可以看出,skewindata配置真正发生作用,只会在以下三种情况下,能够将1个job转化为2个job: select count distinct ... from ... select a,co
2015-07-20 13:59:32
8420
原创 Hive-分桶与排序
参考url• LanguageManual DDL BucketedTables • Bucketed Sorted Tables • https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Sampling创建带分桶的表建表语句 CREATE TABLE user_info_bucketed(user_id BIGINT,
2015-07-18 22:03:25
1411
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人