Hive的数据加载与导出

本文详细介绍了Hive中普通表、分区表和分桶表的数据加载方法,包括load和insert方式,并讨论了数据导出的单重与多重操作。对于分区表,静态与动态分区的使用场景和注意事项被重点阐述。
摘要由CSDN通过智能技术生成

普通表的加载

1.load方式

load data [local] inpath [源文件路径] into table 目标表名;

 

从HDFS上加载数据,本质上是移动文件所在的路径

load data inpath '/user/student.txt' into table student;

 

从本地加载数据,本质上是复制本地的文件到HDFS上

load data local inpath '/user/student.txt' into table student;

 

 

2.insert方式

插入一条数据(单重,先生成临时表再拷贝到student中,效率低)

insert into table student values(00011,黄海霞,18);

 

插入多条数据(单重,查询结果导入student中,效率低)

insert into table student select * from stu where age >=18;

 

多重插入(只扫描一次源表,将结果插入到多个新表中,效率高,常用)

from stu insert into table student01 select * where age >=18 insert into table student02 select * where age <18;

 

 

分区表的加载(常用)

  • 一般不使用load方式,因为这种方式不会自动检验原表与目标表的列是否对应,数据易出错;
  • 一般也不建议使用insert方式单条插入
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值