sqoop export mysql_sqoop简单import使用

一、sqoop作用？

sqoop是一个数据交换工具，最常用的两个工具是导入导出。

导入导出的参照物是hadoop，向hadoop导数据就是导入。

二、sqoop的版本？

sqoop目前有两个版本，1.4.X为sqoop1；1.99.X为sqoop2。两个版本不兼容。

三、使用sqoop列出mysql下的所有数据库

(my_python_env)[root@hadoop26 ~]# sqoop list-databases --connect jdbc:mysql://localhost:3306 --username root --password 123456

information_schema

hive

mysql

test

四、Import工具的使用

4.1将mysql中的某张表导入到hdfs上，现在test下有一张person表

4.2执行sqoop语句

sqoop import --connect jdbc:mysql://localhost:3306/test --username root --password 123456 -table person

4.3在hdfs用户的家目录下，产生了一个person文件夹

(my_python_env)[root@hadoop26 ~]# hadoop fs -lsFound2items

drwx------ - root supergroup 0 2016-07-03 23:00.Trash

drwxr-xr-x - root supergroup 0 2016-07-21 22:30person

(my_python_env)[root@hadoop26~]# hadoop fs -lsperson

Found3items-rw-r--r-- 1 root supergroup 0 2016-07-21 22:30 person/_SUCCESS-rw-r--r-- 1 root supergroup 17 2016-07-21 22:30 person/part-m-00000

-rw-r--r-- 1 root supergroup 12 2016-07-21 22:30 person/part-m-00001(my_python_env)[root@hadoop26~]# hadoop fs -cat person/part-*

1,zhangsan,false

2,lisi,true

4.4delete-target-dir参数

当再次执行sqoop语句的时候，会报错，因为person文件夹已经存在了，我们需要先删除这个文件夹再运行sqoop语句。

也可以使用s