Hive分区表实战 - 单分区字段

一、实战概述

• 在本Hive分区表管理实战中，我们通过一系列实际操作演示了如何有效地利用分区功能来组织和查询大规模数据。首先，创建了一个名为book的内部分区表，其结构包含id与name字段，并根据country字段进行分区。接下来，准备并加载了不同国家（中国和英国）书籍的数据文件到对应的分区目录中。

• 为了展示分区灵活性，我们还模拟了手动创建新分区（日本），上传数据文件并通过msck repair table命令将新分区纳入表的元数据管理中。此外，实战还涉及分区的删除、重命名等操作，直观展示了Hive如何同步更新分区状态至HDFS存储及元数据层面。

• 最后，通过查看MySQL中Hive Metastore数据库的相关表信息，揭示了Hive如何记录分区的具体元数据内容，包括分区位置等关键信息。整个实战过程充分展现了Hive分区表在提升查询效率、实现数据分类存储以及简化数据管理方面的强大能力。

二、实战步骤

（一）创建图书数据库

• 执行命令：create database bookdb;
  
• 执行命令：use bookdb;，切换到bookdb数据库
  

（二）创建国别分区的图书表

• 执行语句：create table book (id int, name string) partitioned by (country string) row format delimited fields terminated by ' ';，创建book表
  

（三）在本地创建数据文件

• 在master虚拟机上创建中文书籍数据文件cn_book.txt