hive导入和导出的几种方式

hive表导入方式:

1)加载本地文件到hive表

load data local inpath '本地文件路径'  into tabble 表名;

2)加载hdfs文件到hive表

load data inpath 'hdfs文件路径' [overwrite] into table 表名;

加上overwrite的话便会重写表的数据

3)加载已有数据

insert into table 表1 select另外一个表;

4)创建表时制定location

这个经常用于外部表创建。

如果是未分区的表的话,可以在创建表语句的最后加上 location 'hdfs表文件的地址';

如果是分区的表的话, location 'hdfs表文件的地址';   的路径里通过文件夹表示分区之后并不能直接将分区和这个表绑定。需要修复分区表,通过一下语句:

第一种方式:

msck repair table 表名;

第二种方式:

alter table 表名 add partition(分区字段='该分区的文件夹名');

hive表导出方式:

1)导出到本地目录

insert into local directory '本地目录' select语句;


这时会在本地目录下生成一个文件,但是如果查看文件的话,会发现文件的格式是非常乱的。

可以通过以下语句来格式化一下:

insert into local directory 
ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' COLLECTION ITEMS TERMINATED BY '\n' 
'本地目录' select语句;

'\t'是列与列之间的分隔符
'\n' 是行与行之间的分隔符

2)导出到hdfs目录

只需要将上面的local去掉即可

其他

采用hive的-e和-f参数来导出数据。

参数为: -e 的使用方式,后面接SQL语句。>>后面为输出文件路径

hive -e "select * from testA" >> /home/hadoop/output/testA.txt  
参数为:  -f  的使用方式,后面接存放sql语句的文件。 >> 后面为输出文件路径

hive -f /home/hadoop/output/sql.sql >> /home/hadoop/output/testB.txt  






评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值