sqoop基础整理

Sqoop是什么
Sqoop是一个用于在Hadoop和关系数据库之间传输数据的工具
将数据从RDBMS导入到HDFS
HDFS、Hive、HBase
从HDFS导出数据到RDBMS
使用MapReduce导入和导出数据，提供并执行操作和容错
目标用户
系统管理员、数据库管理员
大数据分析师、大数据开发工程师等
从RDB导入数据到HDFS-1
导入表到HDFS

sqoop import 
--connect jdbc:mysql://hadoop004:3306/hive      //配置数据库连接为MySQL中的hive数据库 
--driver com.mysql.jdbc.Driver 
--table user 	//指定表（表名大小写敏感）
--username root --password hadoop
--target-dir /data/user    //导入指定hdfs目录
--m 3   //m表示Mapper数量，表示将数据分为了3片，若不加m，默认分为4片

sqoop-import是sqoop import的别名
例： bin/sqoop-import --connect jdbc:mysql://hadoop004:3306/hive --driver com.mysql.jdbc.Driver --table TXNS --username root --password ok --target-dir /data/txns/ --m 3
查看hsfs中的分片信息：hdfs dfs -cat /data/txns/part-m-00000
从RDB导入数据到HDFS-2
通过where语句过滤导入表

sqoop import 
--connect jdbc:mysql://hadoop004:3306/hive
--table orders 
--where “order_date > ‘2015-10-10’” 	//指定wehere条件,语句必须用""包括，条件必须用''包括
--username root 
--password hadoop 
--delete-target-dir 	//如果目标目录存在，则删除
--target-dir /data/orders 
--m