Author: FuRenjie
1、Hive启动输出压缩
在hive中先检查hive的输出压缩是否启动(默认为false),设置为true:
set hive.exec.compress.output=true;
2、主流压缩格式比较
以下是Google几年前发布的一组测试数据(数据有些老了,有人近期做过测试的话希望能共享出来):
Algorithm |
% remaining |
Encoding |
Decoding |
GZIP |
13.4% |