Sqoop环境搭建

遇安.YuAn

已于 2022-11-18 10:44:18 修改

阅读量616

点赞数 1

分类专栏： sqoop 大数据平台组件搭建文章标签： sqoop 数据库 mysql

于 2022-11-17 20:17:19 首次发布

本文链接：https://blog.csdn.net/qq_62731133/article/details/127910627

版权

12 篇文章 0 订阅

订阅专栏

1 篇文章 0 订阅

订阅专栏

安装sqoop的前提是已经配置好了JDK和Hadoop环境

1、先在官网上下载Sqoop的压缩包

2、创建一个放解压后文件的目录：mkdir /export/server

3、切换目录：cd /export/server

4、用rz上传压缩包解压并重命名：

解压：tar -zxvf 压缩包

重命名：mv 解压后的sqoop sqoop

如果没有rz可以下载：yum install -y lrzsz

5、切换目录：cd /sqoop/conf

6、将原本的sqoop-env.sh...文件改名为sqoop-env.sh

7、修改sqoop-env.sh:

//hadoop目录
export HADOOP_COMMON_HOME=/export/server/hadoop
//hadoop目录
export HADOOP_MAPRED_HOME=/export/server/hadoop

8、切换目录：

cd /export/server/sqoop/lib

9、用rz将mysql-connector-java-5.1.45-bin.jar上传到该目录（mysql的依赖包）

10、vi /etc/profile配置环境变量，在最下面加上

export SQOOP_HOME=/export/server/sqoop
export PATH=$PATH:$SQOOP_HOME/bin

11、用sqoop version验证

出现sqoop的版本号即为安装成功

12、测试（前提是已经安装好了MySQL）：

Sqoop连接Master节点的MySQL数据库是否成功并展示所有的database（在sqoop目录下）：

./bin/sqoop list-databases --connect jdbc:mysql://localhost:3306/ --username root --password 123456

有什么问题可以在文章下面评论或者私信

关注

专栏目录