安装部署 Sqoop

该部分的安装需要在 Hadoop 已经成功安装的基础上,并且要求 Hadoop 已经正常启动。

Hadoop 正常启动的验证过程如下：

（1） 使用下面的命令看可否正常显示 HDFS 上的目录列表

hdfs dfs -ls / 或者 hadoop fs -ls /

（2） 使用浏览器查看相应界面

• 访问：192.168.124.138:9870端口

• 访问：192.168.124.138:8088端口

5.1 解压并安装 Sqoop

（1）将Sqoop安装包上传到HadoopMaster的/home/hadoop/software目录下

使用命令：cd /home/hadoop/software  

使用命令：ll 查看

（2）解压sqoop安装包

使用命令：tar -zxvf sqoop-1.4.5.bin_had.gz

（3）改名

使用命令：mv sqoop-1.4.5.bin_hadoop-2.0.4-alpha sqoop-1.4.5改名为sqoop-1.4.5

5.2 配置 Sqoop

（1）使用命令：cd sqoop-1.4.5/conf 进入目录下

（2）使用命令：cp sqoop-env-template.sh sqoop-env.sh 将sqoop-env.template.sh 复制为sqoop-env.sh

（3）使用命令：vi sqoop-env.sh

将该文件 sqoop-env.sh 里面的内容替换为：

#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/home/hadoop/software/hadoop-3.3.0

#Set path to where hadoop-*-core.jar is available
export HADOOP_MAPRED_HOME=/home/hadoop/software/hadoop-3.3.0

#set the path to where bin/hbase is available
export HBASE_HOME=/home/hadoop/software/hbase-2.2.4

#Set the path to where bin/hive is available
export HIVE_HOME=/home/hadoop/software/hive3.1.2

（4）使用命令：vi ~/.bash_profile 进入配置环境变量

在里面添加：

export SQOOP_HOME=/home/hadoop/software/sqoop-1.4.5
export PATH=$SQOOP_HOME/bin:$PATH

（5）使用命令：source ~/.bash_profile

（6）把mysql-connector-java.jar 上传到/sqoop-1.4.5/lib目录下

（7）使用命令：cd  software/sqoop-1.4.5/lib

（8）使用命令：ll  查看

5.3 启动并验证 Sqoop

（1）进入 Sqoop 安装主目录：

bin/sqoop help

执行命令后会看到下面的打印输出，表示安装成功：

（2）测试sqoop与mysql的连接

使用命令：/home/mysql5.7/support-files/mysql.server start  启动mysql

使用命令：sqoop list-databases --connect jdbc://127.0.0.1:3006/ --username root -P  测试sqoop与mysql的连接