Sqoop 简介与安装

Sqoop 简介与安装

一、Sqoop 简介

Sqoop 是一个常用的数据迁移工具，主要用于在不同存储系统之间实现数据的导入与导出：

• 导入数据：从 MySQL，Oracle 等关系型数据库中导入数据到 HDFS、Hive、HBase 等分布式文件存储系统中；

• 导出数据：从 分布式文件系统中导出数据到关系数据库中。

其原理是将执行命令转化成 MapReduce 作业来实现数据的迁移

二、安装

版本选择：目前 Sqoop 有 Sqoop 1 和 Sqoop 2 两个版本，但是截至到目前，官方并不推荐使用 Sqoop 2，因为其与 Sqoop 1 并不兼容，且功能还没有完善，所以这里优先推荐使用 Sqoop 1。

2.1 下载并解压

下载所需版本的 Sqoop 。下载地址为：https://mirrors.bfsu.edu.cn/apache/sqoop/1.4.7/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz

# 下载后进行解压
tar -zxvf  sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /home/hadoop/ 

mv sqoop-1.4.7.bin__hadoop-2.6.0 sqoop-1.4.7

2.2 配置环境变量

# vim /etc/profile

添加环境变量：

export SQOOP_HOME=/ho