- 博客(3)
- 收藏
- 关注
RSS订阅原创 presto-csdn
[TOC] 文档问题catalog在哪里设置？重要语句 语句 说明 show catalogs 显示catalog show session 查看当前session的主要属性 语法对比整理 hive presto 说明 select my_array[1] select my_array[CARDINALITY(my_array)] SQL中的下标运算符
2016-09-29 11:58:32
394
原创 Hive-hive.groupby.skewindata配置相关问题调研
使用hive的过程中，我们习惯性用set hive.groupby.skewindata=true来避免因数据倾斜造成的计算效率问题，但是每个设置都是把双刃剑，最近调研了下相关问题，现总结如下： 从下表可以看出，skewindata配置真正发生作用，只会在以下三种情况下，能够将1个job转化为2个job： select count distinct ... from ... select a,co
2015-07-20 13:59:32
8427
原创 Hive-分桶与排序
参考url• LanguageManual DDL BucketedTables • Bucketed Sorted Tables • https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Sampling创建带分桶的表建表语句 CREATE TABLE user_info_bucketed(user_id BIGINT,
2015-07-18 22:03:25
1413
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人