黑猴子的家：Hive 表的优化之 行列过滤

列处理：在SELECT中，只拿需要的列，如果有，尽量使用分区过滤，少用SELECT 。

行处理：在分区剪裁中，当使用外关联时，如果将副表的过滤条件写在Where后面，那么就会先全表关联，之后再过滤。

案例实操

1、测试先关联两张表，再用where条件过滤

hive (default)> select o.id from bigtable b
                join ori o on o.id = b.id
                where o.id <= 10;

Time taken: 26.043 seconds, Fetched: 100 row(s)

2、通过子查询后，再关联表

hive (default)> select b.id from bigtable b
                join (select id from ori where id <= 10 ) o on b.id = o.id;

Time taken: 30.058 seconds, Fetched: 100 row(s)