hive向mysql导数据_Mysql & Hive 导入导出数据

本文介绍了如何在Hive中进行数据处理,包括王燕行的转列操作,然后详细阐述了MySQL的数据导入和导出,如使用LOAD DATA INFILE和SELECT INTO OUTFILE命令。此外,还展示了在Hive中创建表、导入数据以及导出数据的步骤,包括LOAD DATA LOCAL INPATH和INSERT OVERWRITE LOCAL DIRECTORY的用法。
摘要由CSDN通过智能技术生成

---王燕行转列sql

select split(concat_ws(',',collect_set(cast(smzq as string))),',')[1] ,split(concat_ws(',',collect_set(cast(smzq as string))),',')[2] from wyy;

---mysql 导入 导出数据部分

--mysql 导入

load data infile 'C:\\Users\\wanghongbo1\\Downloads\\sum.csv' into table `mars_tianchi_sum`

fields terminated by ',' optionally enclosed by '"' escaped by '"'

lines terminated by '\n';

--mysql导出

select * from mars_tianchi_result_avg15 into outfile 'e://avg15.csv' fields terminated by ','optionally enclosed by ''lines terminated by '\n';

--hive 建表及导入数据部分

create table mars_tianchi_songs

(song_id string,

artist_id string,

publish_time string,

song_init_plays string,

Language string,

gender string

)

ROW FORMAT DELIMITED

FIELDS TERMINATED BY ','

STORED AS TEXTFILE;

--hive 导入

load data local inpath '/test_whb/mars_tianchi_songs.csv' into table mars_tianchi_songs;

--hive 导出

INSERT OVERWRITE local DIRECTORY'/home/wizad/lmj/inserest2'

ROW FORMAT DELIMITED FIELDS TERMINATED BY','

select * fromwizad_mdm_dev_lmj_edition_insterest

导入到本地可直接用-e命令,默认使用\t分隔:

hive -e 'use wizad;

select * fromwizad_mdm_dev_lmj_edition_insterest;'>> mytest

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值