Sqoop安装

1. 解压缩文件到 /usr/local 目录下

》tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz  解压缩
》sudo mv sqoop-1.4.7.bin__hadoop-2.6.0 /usr/local/

2. 重命名

》sudo mv sqoop-1.4.7.bin__hadoop-2.6.0 sqoop

3. 配置环境变量

在主目录 .bashrc 中配置：

》sudo vi .bashrc

向其中追加：

export SQOOP_HOME=/usr/local/sqoop
export PATH=$PATH:$SQOOP_HOME/bin

重新加载配置文件：

》source .bashrc

4. 添加 JDBC 驱动 jar 包

》mv mysql-connector-java-5.1.49-bin.jar /usr/local/sqoop/lib/

5. 修改配置文件

修改 sqoop 运行的环境变量文件 sqoop-env.sh

》cd sqoop/conf/

复制环境变量文件模板的副本，并改名

》cp sqoop-env-template.sh sqoop-env.sh
》

追加内容：

export HADOOP_COMMON_HOME=/usr/local/hadoop-2.7.7
export HADOOP_MAPRED_HOME=/usr/local/hadoop-2.7.7
export HIVE_HOME=/usr/local/hive

6. 测试 Sqoop 是否配置成功

》cd
查看版本号
》sqoop version
查看 sqoop 命令参数
》sqoop help

7. 连接对应的 MySQL 数据库

交互式访问：sqoop list-databases --connect jdbc:mysql://hadoop03:3306 --username root --password 123456
文件授权访问：
生成密码文件，为隐藏文件
》echo -n "123456" > .password
查看文件
》ls -a
》cat .password
修改文件访问权限为400
》chmod 400 .password
将密码文件上传至 HDFS
》hdfs dfs -put .password /
使用密码文件访问 mysql 数据库
》sqoop list-databases --connect jdbc:mysql://hadoop01:3306 --username root --password-file /.password
或者
[root@hadoop01 ~]#sqoop list-databases --connect jdbc:mysql://hadoop01:3306 --username root --password 123456

以前的文档

忘记记录链接了