sqoop 1 mysql_Sqoop学习1：Sqoop的搭建及使用

Sqoop(SQL to Hadoop)看名字就能知道，它是传统数据库和Hadoop之间数据导入导出的一个桥梁。Sqoop是利用MapReduce进行数据传输的，速度还是很快的。lz的任务是将MySQL的一张表中的数据(18万+条)导入到HDFS中，所以就来尝试下Sqoop。

1.Sqoop服务搭建：

lz环境上Hadoop的版本是2.3.0，开始时使用的是Sqoop1.99.6，貌似是版本差异的原因，启动服务是报出异常java.sql.SQLNonTransientConnectionException:Connection closed by unknown interrupt，lz曾试图探究原因，但是失败了，^囧。所以lz遵从网友的建议，使用Sqoop1.99.4，这个问题便不再出现了。

其实Sqoop Server搭建很easy，有两个配置文件需要修改：

catalina.properties

将Hadoop、HBase以及Hive等所有需要的jar都添加到common.loader中，如下

common.loader=${catalina.base}/lib,${catalina.base}/lib/*.jar,${catalina.home}/lib,${catalina.home}/lib/*.jar,${catalina.home}/../lib/*.jar,/usr/lib/hadoop/*.jar,/usr/lib/hadoop/lib/*.jar,/usr/lib/hadoop-hdfs/*.jar,/usr/lib/hadoop-hdfs/lib/*.jar,/usr/lib/hadoop-mapreduce/*.jar,/usr/lib/hadoop-mapreduce/lib/*.jar,/usr/lib/hadoop-yarn/*.jar,