Hive应用：外部分区表

最新推荐文章于 2020-12-07 10:53:24 发布

weixin_33795806

最新推荐文章于 2020-12-07 10:53:24 发布

阅读量80

点赞数

文章标签：大数据 python

原文链接：https://my.oschina.net/u/3754001/blog/1860436

版权

2019独角兽企业重金招聘Python工程师标准>>>

Hive应用：外部分区表

介绍

Hive可以创建外部分区表。创建表的时候，分区要在建表语句中体现。建完之后，你不会在表中看到数据，需要进行分区添加，使用alter语句进行添加。然后数据才会显示。

样例

有如下的目录结构。

建表语句：

create external table Tbl_Custom(CustomID int,AreaID int,Name string,Gender int) partitioned by(city string) row format delimited fields terminated by '\t' location 'hdfs://hadoop01:9000/data/tbl_custom';

创建表的时候，只创建到tbl_custom这一层目录，余下的一层目录使用分区表示，如果余下的有两层目录，那么可以使用两个分区，目录层级以此类推。将这个外部表创建好之后，使用查询语句，是看不到数据的，需要给这个表添加分区内容，才能看到具体的信息，如下：

alter table Tbl_Custom add partition(city='beijing') location 'hdfs://hadoop01:9000/data/tbl_custom/city=beijing';
alter table Tbl_Custom add partition(city='shanghai') location 'hdfs://hadoop01:9000/data/tbl_custom/city=shanghai';

当添加好这两个分区之后，这两个目录下的数据就可以在一张表中查看了，这个方法很适用于合并数据。

上一篇：Hive应用：外部表链接内部表

下一篇：Hive应用：数据外置内部表

转载于:https://my.oschina.net/u/3754001/blog/1860436