sqoop实现mysql到hive数据库的导入导出

使用sqoop直接执行导入导出写法
从mysql导入到hive
sqoop import -Dorg.apache.sqoop.splitter.allow_text_splitter=true --connect jdbc:mysql://10.20.30.105/appbase --username lty --password ltywh123 --fields-terminated-by "\t"  --hive-import  --incremental lastmodified  --check-column startTime  --last-value '2017-05-05 10:03:05'    --hive-partition-key   computeDate  --hive-partition-value  '20170706'  --target-dir /tmp/my_trail --table my_trail --hive-table userdb.my_trail
注释:这种写法只适用于mysql的端口号为默认的3306,如果mysql为其他端口号,应该在ip后面加上端口号
从hive导出到mysql

sqoop export --connect jdbc:mysql://10.20.30.105/appbase --username lty --password ltywh123 --table userod_citycode_test --export-dir /apps/hive/warehouse/userdb.db/userod_citycode_test --fields-terminated-by '\t' --lines-terminated-by '\n' --input-null-string '\\N' --input-null-non-string '\\N'

password含特殊字符的要在前面加转义字符\

注释: jdbc连接同上

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值