Sqoop1.4.7保姆级安装教程

前提需要先安装好hive，安装教程请参考Hive3.1.3详细安装配置教程及安装时问题解决

1.cd到你想要安装sqoop的文件夹，例如我这里是cd /usr/local

cd /usr/local

 2.然后执行下载命令

sudo wget https://archive.apache.org/dist/sqoop/1.4.7/sqoop-1.4.7.tar.gz

执行完毕看到如下界面

 

 3.解压文件

sudo tar -zxvf sqoop-1.4.7.tar.gz

4.修改文件名

sudo mv sqoop-1.4.7 sqoop

5.修改文件夹属主（这里的hadoop:hadoop为用户名:用户名）

sudo chown -R hadoop:hadoop sqoop

6.修改配置文件sqoop-env.sh

cd /usr/local/sqoop/conf/
cat sqoop-env-template.sh  >> sqoop-env.sh
vim sqoop-env.sh 

修改sqoop-env.sh的如下信息，在开头加入

export HADOOP_COMMON_HOME=/usr/local/hadoop
export HADOOP_MAPRED_HOME=/usr/local/hadoop
export HBASE_HOME=/usr/local/hbase
export HIVE_HOME=/usr/local/hive

7.拷贝jdbc的驱动包到sqoop的lib目录下（驱动包下载请执行Hive3.1.3详细安装配置教程及安装时问题解决第6步）

cp /usr/local/mysql-connector-java-5.1.40/mysql-connector-java-5.1.40-bin.jar  /usr/local/sqoop/lib

 8.设置环境变量

vim ~/.bashrc

 在开头加入如下信息：

export SQOOP_HOME=/usr/local/sqoop
export PATH=$PATH:$SBT_HOME/bin:$SQOOP_HOME/bin
export CLASSPATH=$CLASSPATH:$SQOOP_HOME/lib

执行下面命令让配置文件立即生效:

source ~/.bashrc

9.输入命令检查是否安装成功

sqoop version

如果提示 错误: 找不到或无法加载主类 org.apache.hadoop.hbase.util.GetJavaProperty

则执行命令 

vim /usr/local/hbase/conf/hbase-env.sh

 将文件最后一行export HBASE_DISABLE_HADOOP_CLASSPATH_LOOKUP="true"取消注释

 如果提示 错误: 找不到或无法加载主类 org.apache.sqoop.Sqoop

原因是sqoop1.4.7里面缺少sqoop1.4.7.jar包，我们可以从sqoop1.4.6中得到sqoop1.4.6.jar来等效替换

 

则运行以下命令 

cd /usr/local
sudo wget https://archive.apache.org/dist/sqoop/1.4.6/sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz

 下载完毕后执行

sudo tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz
cp /usr/local/sqoop-1.4.6.bin__hadoop-2.0.4-alpha/sqoop-1.4.6.jar /usr/local/sqoop/lib
rm -rf /usr/local/sqoop-1.4.6.bin__hadoop-2.0.4-alpha /usr/local/sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz

 

10.测试连接mysql(注意输入自己的数据库账户名和密码)

service mysql start
sqoop list-databases --connect jdbc:mysql://localhost:3306 --username root --password 1234

看到如下界面即安装成功