hive-03-hive的分区

最新推荐文章于 2023-12-21 14:23:50 发布

九师兄

最新推荐文章于 2023-12-21 14:23:50 发布

阅读量729

点赞数

分类专栏：大数据-hive 文章标签： hive 分区

本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。

本文链接：https://blog.csdn.net/qq_21383435/article/details/77892244

版权

大数据-hive 专栏收录该内容

36 篇文章 462 订阅 ¥9.90 ¥99.00

订阅专栏

本文介绍了hive分区的概念，解释了其出现的背景是为了提高大数据查询效率。通过对比传统做法和分区后的查询速度，阐述了分区如何减少数据扫描量，从而提升查询性能。并通过一个实例展示了hive分区的实际应用。

摘要由CSDN通过智能技术生成

在这里插入图片描述

1.hive分区与Bucket的畏难情绪

刚刚开始学习，这个的时候，一直感觉他比较难，看名字就觉得不好理解，但是实际上学起来超级简单。

##２．出现背景
　　这个东西为什么出来呢？来看一个需求，技术的的出现总是因为有了需求才会诞生的。
　　假设我们有数据宾馆的近１０年的数据，格式如下

每列的意义
| hotel  |         |         |
		 | h_id   | id  |
|        | h_region  | 旅馆行政区划  |
|        | h_hname  | 旅馆名称    |
|        | h_address  | 旅馆地址    |
|        | h_uname  | 姓名      |
|        | h_code  | 证件号码    |
|        | h_start  | 开房时间    |
|        | h_end  | 退房时间    |
|        | h_start＿ｍ  | 开房时间时间戳    |
|        | h_end＿ｍ  | 退房时间时间戳    |
|        |

了解本专栏