hive 分区表分组表分桶表

最新推荐文章于 2023-07-11 17:56:01 发布

请大佬带带我

最新推荐文章于 2023-07-11 17:56:01 发布

阅读量394

点赞数

文章标签： hive hadoop

本文链接：https://blog.csdn.net/weixin_45967421/article/details/109114557

版权

本文介绍了Hive中创建表的各种方式，包括内部表、外部表、分区表和分桶表的创建及特点。强调了分区表在避免全表扫描、提高查询效率方面的作用，以及分桶表对于提升JOIN查询效率的意义。同时，讲解了如何添加、删除分区，以及如何插入数据到分区表和分桶表中。最后，提到了数据加载到Hive的方法。

摘要由CSDN通过智能技术生成

第一种常用新建原始表：
create [EXTERNAL] table vv_stat_fact
(
userid string,
stat_date string,
tryvv int,
sucvv int,
ptime float
)
PARTITIONED BY ( 非必选；创建分区表
dt string)
clustered by (userid) into 3000 buckets // 非必选；分桶子
ROW FORMAT DELIMITED FIELDS TERMINATED BY ‘\t’ // 必选;指定列之间的分隔符
STORED AS rcfile // 非必选；指定文件的读取格式，默认textfile格式
location ‘/testdata/’; //非必选；指定文件在hdfs上的存储路径，如果已经有文件，会自动加载，默认在hive的warehouse下

建表1，全部使用默认配置。
CREATE TABLE emp2(
id string,
name string,
job string,
mgr string,
hiredate date,
sal double,
comm double,
deptid string)
ROW FORMAT DELIMITED FIELDS TERMINATED BY ‘,’ ;
如果不指定存储路径，默认在hdfs上/user/hive/warehouse/shujia/emp2`
h