sqoop命令记录

1）列出mysql数据库中的所有数据库

./sqoop list-databases --connect jdbc:mysql://hdp-3:3306/ --username root --password lwy92721

2)连接mysql并列出test数据库中的表

./sqoop list-tables --connect jdbc:mysql://hdp-3:3306/frame --username root --password lwy92721

命令中的frame为mysql数据库中的frame数据库名称 username password分别为mysql数据库的用户密码

3)将关系型数据的表结构复制到hive中,只是复制表的结构，表中的内容没有复制过去。

./sqoop create-hive-table --connect jdbc:mysql://hdp-3:3306/frame --username root --password lwy92721.. --table school --hive-table sqoop

其中 –table school为mysql中的数据库frame中的表–hive-table sqoop 为hive中新建的表名称

4)从关系数据库导入文件到hive中
sqoop import –-connect jdbc:mysql://localhost:3306/zxtest –-username
root –-password 123456 –-table sqoop_test –-hive-import –-hive-table
s_test -m 1

5)将hive中的表数据导入到mysql中,在进行导入之前，mysql中的表hive_test必须已经提起创建好了。

WARN mapreduce.Counters: Group org.apache.hadoop.mapred.Task$Counter is deprecated. Use org.apache.hadoop.mapreduce.TaskCounter instead

6）从数据库导出表的数据到HDFS上文件

./sqoop import   --connect jdbc:mysql://hdp-3:3306/frame  --username root  --password lwy092721   --table student;

7）从数据库增量导入表数据到hdfs中

./sqoop import   --connect jdbc:mysql://hdp-3:3306/frame  --username root  --password lwy092721   --table school  --incremental append  --check-column num_iid --last-value 3