Sqoop01:Sqoop安装部署以及快速使用:从MySQL导入HDFS、从HDFS导出MySQL

57 篇文章 4 订阅 ¥59.90 ¥99.00
1 篇文章 0 订阅
本文介绍了Sqoop1的安装部署,包括下载、解压、配置环境变量等步骤,并详细讲解了Sqoop的两大功能——数据导入(全表和查询导入)和导出,以及如何处理空值。最后,讨论了如何将Sqoop命令封装到脚本中以方便使用。
摘要由CSDN通过智能技术生成

一、Sqoop的版本

Sqoop目前有两大版本,Sqoop1和Sqoop2,这两个版本都是一直在维护者的,所以使用哪个版本都可以。

这两个版本我都用过,还是感觉Sqoop1用起来比较方便,使用Sqoop1的时候可以将具体的命令全部都写到脚本中,这样看起来是比较清晰的,但是有一个弊端,就是在操作MySQL的时候,MySQL数据库的用户名和密码会明文暴露在这些脚本中,不过一般也没有什么问题,因为在访问生产环境下的MySQL的时候,是需要申请权限的,就算你知道了MySQL的用户名和密码,但是你压根无法访问MySQL的那台机器,所以这样也是安全的,只要运维那边权限控制到位了就没问题。

sqoop2中引入了sqoop server(服务),集中管理connector(连接),而sqoop1只是客户端工具。

相对来说,Sqoop1更加简洁,轻量级。

Sqoop1的最后更新时间是2018年
Sqoop2的最后更新时间是2016年
Sqoop2我之前在使用的时候发现里面bug还是比较多的,相对来说Sqoop1更加稳定一些。

所以在这我们采用Sqoop1。

二、下载

sqoop-1.4.7.bin__hadoop-2.6.0.tar百度网盘地址:

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

做一个有趣的人Zz

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值