本文由FuRenjie撰写，探讨了Hive的输出压缩设置，指出默认为false，可通过set hive.exec.compress.output=true启用。文章还对比了GZIP、LZO和Snappy三种压缩格式，强调Snappy在压缩率较低的情况下，提供了更快的压缩和解压速度，适合Hadoop 2.0环境。配置Snappy压缩需在mapred-site.xml中指定相关参数。
在hive中先检查hive的输出压缩是否启动（默认为false），设置为true:
set hive.exec.compress.output=true;
以下是Google几年前发布的一组测试数据（数据有些老了，有人近期做过测试的话希望能共享出来）：
| Algorithm |
% remaining |
Encoding |
Decoding |
| GZIP |
13.4% |
1036
2123
1490
1272
3986
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
最低0.47元/天 解锁文章
