sqoop常见命令的使用

注:db02为在sqoop02中创建的数据库,student为在db02数据库中创建的表

Bigdata02为在hive下创建的数据库,mycolumns01为获取筛选结果后自动生成的表。

  • columns的使用
  1. 上传筛选数据到hive的bigdata.mycolumns里

sqoop import -connect jdbc:mysql://192.168.43.216:3306/db02 -username sqoop02 -password 123456 -table student -hive-import -hive-table bigdata02.mycolumns01 -m 1 --columns 'id,age'

  1. 上传成功:

  • where的使用
  1. 抽取年龄为20的人的信息:

sqoop import -connect jdbc:mysql://192.168.43.216:3306/db02 -username sqoop02 -password 123456 -table student -hive-import -hive-table bigdata02.mycolumns02 -m 1 --columns 'id,age' --where ‘age=20’

2.创建成功:

  • query的使用
  1. 自定义SQL的方式导入的用法:

sqoop import -connect jdbc:mysql://192.168.43.216:3306/db02 -username sqoop02 -password 123456 --target-dir student01 -hive-import -hive-table bigdata02.mycolumns04 -m 1 --query "select id,name from student where age=20 and \$CONDITIONS"

2.创建脚本:

脚本内容:

hdfs dfs -rm -r hdfs://HadoopMaster:9000/user/hadoop/student01

sqoop import -connect jdbc:mysql://192.168.43.216:3306/db02 -username sqoop02 -password 123456 --target-dir student01 -hive-import -hive-table bigdata02.mycolumns04 -m 1 --query "select id,name from student where age=20 and \$CONDITIONS"

  1. 给脚本赋权:

  1. 执行脚本:

  1. 执行成功:

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值