hadoop – 如何将数据插入Hive中的Parquet表

Hive中的Parquet表本质是一种被压缩了的二进制文件,不方便对其进行操作编辑

方法一:(针对数据量不大时)

优点:方便、快捷

insert into table TABLE_NAME1 partition(dt="2019-09-05")
select
32451,"支付卡券11111qaz",19,19,"2019-09-06 17:34:19"
from TABLE_NAME2
limit 1;

TABLE_NAME1:目标表名
TABLE_NAME2:任意选取一个实际存在的表(1、数据量不大;2、数据条数大于插入条数)

方法二:(针对数据量较大时)

步骤一:将数据存入文本文档中(.txt)

步骤二:建立txt格式表

-- 创建txt格式表:
create table cdim.dim_city_rank(
rank int comment "城市排名",
city_id int comment "城市id",
city_name string comment "城市名称",
province string comment "省份",
short_word string comment "简称",
pinyin string comment "城市拼音名"
) ROW FORMAT DELIMITED FIELDS TERMINATED BY '|'
LINES TERMINATED BY '\n'
STORED AS TEXTFILE;

。。。详细 转https://blog.csdn.net/weixin_40873462/article/details/99979474

步骤三:将步骤一中的数据存入步骤二中的表中

步骤四:将步骤三中表的数据用sql读出写入目标表中

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值