安装sqoop以及测试连接数据库

最新推荐文章于 2024-08-12 03:04:15 发布

郭惠姗

最新推荐文章于 2024-08-12 03:04:15 发布

阅读量2.2k

点赞数

分类专栏： sqoop 文章标签：数据库大数据 jdbc sqoop

本文链接：https://blog.csdn.net/guohuishan/article/details/108153398

版权

本文介绍了在集群搭建中安装sqoop的详细步骤，包括上传安装包、解压、配置文件修改、拷贝jdbc驱动等，并通过测试连接数据库验证sqoop的安装是否成功。

摘要由CSDN通过智能技术生成

sqoop是一款开源的工具，主要用于hadoop(hive)与传统的数据库(mysql,oracle)间进行数据的传递，可以将一个关系型数据库中的数据导进到hadoop的hdfs中，也可以将hdfs的数据导入到关系型数据库中。

集群搭建中需要安装sqoop，步骤如下：

1.上传

上传安装包sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz到bigdata02的/opt/software路径中

2.解压

tar -zxf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt/module/

3.重命名

mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha/ sqoop

4.修改配置文件

进入到/opt/module/sqoop/conf目录，重命名配置文件
mv sqoop-env-template.sh sqoop-env.sh
vim sqoop-env.sh

增加如下内容
export HADOOP_COMMON_HOME=/opt/module/hadoop-2.7.2
export HADOOP_MAPRED_HOME=/opt/module/hadoop-2.7.2
export HIVE_HOME=/opt/module/hive
export ZOOKEEPER_HOME=/opt/module/zookeeper-3.4.10
export ZOOCFGDIR=/opt/module/zookeeper-3.4.10/conf
export HB