Hive分桶表的基本操作及结构

一、为何分桶

分区提供一个隔离数据和优化查询的便利方式。不过，并非所有的数据集都可形成合理的分区。对于一张表或者分区，Hive 可以进一步组织成桶，也就是更为细粒度的数据范围划分。

分桶是将数据集分解成更容易管理的若干部分的另一个技术。
分区针对的是数据的存储路径；分桶针对的是数据文件。

分桶是指定分桶表的某一列，让该列数据按照哈希取模的方式随机、均匀地分发到各个桶文件中。因为分桶操作需要根据某一列具体数据来进行哈希取模操作，故指定的分桶列必须基于表中的某一列（字段）。因为分桶改变了数据的存储方式，它会把哈希取模相同或者在某一区间的数据行放在同一个桶文件中。如此一来便可提高查询效率，如：我们要对两张在同一列上进行了分桶操作的表进行JOIN操作的时候，只需要对保存相同列值的桶进行JOIN操作即可。同时分桶也能让取样（Sampling）更高效。

二、分桶表的建立

1. 创建分桶表

create table stu_buck(id int, name string)
clustered by(id) 
into 4 buckets
row format delimited fields terminated by '\t';

2. 查看表结构

desc formatted stu_buck;

查询结果：

3. 导入数据到分桶表中

load data local inpath '/opt/module/datas/student.txt' into table stu_buck;

4. 查看创建的分桶表中是否分成4个桶
   
5. 查询分桶的数据
   
   注意：
   分区使用表外的字段，分桶使用表内字段
   分区可以使用load加载数据，而分桶就必须要使用insert into方式加载数据
   分区常用；分桶少用