知识目标:了解Hive数据仓库分区、Hive数据仓库分桶
能力目标:对数据仓库的分区分桶有一个清晰的认识。
1:什么是分区?分区的概念是什么? 数据分区的语句
分区列的值将表划分为文件夹
查询时使用“分区”列和常规列类似
查询时Hive自动过滤掉不用于提高性能的分区
2:了解分桶
分桶是相对分区进行更细粒度的划分
根据“桶列”的哈希函数将数据进行分桶
更高的查询处理效率
3:分区与分桶的语法
4:hive操作分区
知识目标:了解Hive数据仓库分区、Hive数据仓库分桶
能力目标:对数据仓库的分区分桶有一个清晰的认识。
1:什么是分区?分区的概念是什么? 数据分区的语句
分区列的值将表划分为文件夹
查询时使用“分区”列和常规列类似
查询时Hive自动过滤掉不用于提高性能的分区
2:了解分桶
分桶是相对分区进行更细粒度的划分
根据“桶列”的哈希函数将数据进行分桶
更高的查询处理效率
3:分区与分桶的语法
4:hive操作分区