hive静态分区,动态分区 -夜幕思年华

脚本数据 person.txt
夜幕1,china
夜幕2,china
夜幕3,china
夜幕4,china
年华1,India
年华2,India
年华3,India
年华4,India

- 静态分区
 1.导入脚本
 centos7，root下创建person.txt脚本，连接hive，创建表person_one。

 create table person_one (
          name string,
          nation string
         ) 
partitioned by (sex string) 
row format delimited fields terminated by ',';

导入脚本数据
load data local inpath '/root/person.txt' into table person_one partition (sex='man'); 

- 多级分区
create table person_muilt (
          name string, 
          nation string
         ) 
 partitioned by (sex string,dt string) 
 row format delimited fields terminated by ',' ; 
 
 导入脚本数据
 load data local inpath '/root/person.txt' into table person_muilt partition (sex='man',dt='2019-09-29');
 load data local inpath '/root/person.txt' into table person_muilt partition (sex='men',dt='2019-09-28');

- 动态分区
create table person_dynamic (
          name string, 
          nation string
         ) 
 partitioned by (sex string,dt string) 
 row format delimited fields terminated by ',' ; 

 设置动态分区
 set hive.exec.dynamic.partition=true;
 set hive.exec.dynamic.partition.mode=nonstrict; 
 
 导入脚本数据
 insert overwrite table person_dynamic partition(sex,dt) select name,nation,sex,dt from person_muilt;

名称	默认值	描述
hive.exec.dynamic.partition	false	设置为true用于打开动态分区功能
hive.exec.dynamic.partition.mode	strict	设置为nonstrict能够让所有的 分区都动态被设定，否则的话至少需要制定一个分区
hive.exec.max.dynamic.partitions	1000	如果自动分区数大于这个参数，将会报错
hive.exec.max.dynamic.partitions.pernode	1000	能被每个mapper活reduce创建的最大动态分区的数目，多出数目会报错