SQOOP导入数据

最新推荐文章于 2024-05-08 19:32:28 发布

JINTIAN

最新推荐文章于 2024-05-08 19:32:28 发布

阅读量225

点赞数

本文链接：https://blog.csdn.net/JINtian04/article/details/106553577

版权

本文详细介绍了如何使用SQOOP将数据从RDBMS导入到HDFS，包括全量导入、查询导入、指定列导入以及使用SQOOP关键字筛选导入。此外，还涵盖了从HDFS导出到RDBMS的操作，并讨论了脚本打包的方法。

摘要由CSDN通过智能技术生成

4.1 导入数据
4.1.1 RDBMS到HDFS

确定Mysql服务开启正常
在Mysql中新建一张表并插入一些数据
mysql -u root -p
create database company;
use company;
create table staff(id int(4) primary key not null auto_increment, name varchar(255), sex varchar(255));
insert into staff(name, sex) values(‘Thomas’, ‘Male’);
insert into staff(name, sex) values(‘Catalina’, ‘FeMale’);
导入数据
（1）全部导入
sqoop import
–connect jdbc:mysql://127.0.0.1:3306/company
–username root
–password root
–table staff
–target-dir /user/company
–delete-target-dir
–num-mappers 1
–fields-terminated-by “\t”

（2）查询导入
sqoop import
–connect jdbc:mysql://127.0.0.1:3306/company
–username root
–password root
–target-dir /user/company
–delete-target-dir
–num-mappers 1
–fields-terminated-by “\t”
–query ‘se