Sqoop 简单的数据导入/导出、一些常用命令及参数

本文详细介绍了如何使用Sqoop进行数据导入和导出操作,包括从RDBMS到HDFS的全量和查询导入,指定列导入,以及通过HDFS到HIVE的两步迁移。同时,还涵盖了从Hive/HDFS到RDBMS的导出,并讲解了简单的脚本打包方法。文章最后列举了Sqoop的一些常用命令和参数。
摘要由CSDN通过智能技术生成

一、数据导入:

在Sqoop中,“导入”概念指:从非大数据集群(RDBMS)向大数据集群(HDFS,HIVE,HBASE)中传输数据,使用 import 关键字。

1)RDBMS 到 HDFS
①确定Mysql 服务开启正常
②在Mysql 中新建一张表并插入一些数据

mysql -uroot -proot
create databese company;
use company;
create table staff(id int(4)primary key not null auto_increment,
name varchar(255),sex varchar(255));
insert into staff(name,sex)valus  'zhangsan','nan');
insert into staff(name,sex)valus  'lisi','nv');

③导入数据
全部导入:

bin/sqoop import --connect jdbc:mysql://192.168.199.130:3306/company 
--username root --password root --table staff --target-dir /usr/company 
--delete-target-dir --num-mappers 1 --fields-termin
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值