使用sqoop全量和增量导入脚本(hive--mysql mysql--hive)
一、MySQL ----> Hive
1、考虑到安全性问题,我们会将数据库、服务器的连接信息放在一个配置脚本里,然后在执行脚本里调用这个配置脚本,从而使配置和执行进行解耦分离
2、配置脚本(db_config.sh)
!/bin/sh
jdbc=mysql://ip:3326/test
username=root
password=root
table=wb_robot
hive-database=zl_test
hive-table=t1
3、将MySQL历史全量数据进行导入到hive
!/bin
原创
2020-06-23 17:21:32 ·
3796 阅读 ·
0 评论