sqoop1.4.7部署及其使用之旅

本文介绍了为何使用Sqoop进行Hadoop与数据库间的数据交互,详细阐述了Sqoop 1.4.7的部署步骤,包括下载、解压、配置环境变量以及添加MySQL驱动,并提供了测试Sqoop连接数据库的命令,帮助读者快速上手。
摘要由CSDN通过智能技术生成

为什么使用sqoop?

  1、对于hadoop数据的处理有时候要用户关系型数据库(mysql,oracle)中的数据进行清洗,或处理的数据需要导入到关系型数据库中;

  2、由于没有工具的支持hadoop的hdfs和数据库之间的交互,手工写map-reduce中来处理复杂繁琐,维护成功高。

  3、sqoop是连接关系型数据库和hadoop的桥梁,主要有两个方面(导入和导出);

开始部署sqoop

 1、下载sqoop-1.4.7的sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz

      路径:https://downloads.apache.org/sqoop/1.4.7/

2、部署sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz

    a、解压sqoop包 tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz  ,并重命名sqoop-1.4.7

    b、修改sqoop配置文件,进入sqoop-1.4.7/conf目录 ;复制 sqoop-env-template.sh文件为sqoop-env.sh,并修改改文件中         HADOOP_COMMON_

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值