sqoop导入、导出数据,运行为job方式

上一篇文章提到sqoop的导入导出的相关案例,这些案例需要个人来进行执行,

效率低并且有可能出现问题

那么,我们可以将sqoop以job的形式来运行,来提高效率:

sqoop job方式设置导数据:
 

sqoop job \
--create gp1919_bap_user \
-- import \
--connect jdbc:mysql://mini4:3306/qfbap_ods \
--driver com.mysql.jdbc.Driver \
--username root \
--password 123456 \
--table user \
--delete-target-dir \
--target-dir  /user/hive/warehouse/gp1919_qfbap_ods.db/ods_user \
--fields-terminated-by '\001' \
;

实质上就是创建一个job,然后来调用这个job:

显示所有的job:

sqoop job --list   

调用job: 

sqoop job --exec gp1919_bap_user

中间输入数据库的密码就可以将程序执行下去,将数据导入到相关的hdfs路径之下去。

 

 

 

下一篇文章介绍,如果比表面人机交互(输入mysql的密码)直接将job运行。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值