最简便sqoop安装步骤


前言—Sqoop是什么?

Sqoop是一个用于在Hadoop和关系数据库服务器之间传输数据的工具。它用于从关系数据库(如MySQL,Oracle)导入数据到Hadoop HDFS,并从Hadoop文件系统导出到关系数据库。它由Apache软件基金会提供。

在这里插入图片描述
由于Apache发行版本的Sqoop版本对应比较严格需要繁琐的编译过程,本教程采用通用的CDH5.3.6版本的大数据配套框架。


提示:在此前请确保已经配置好了CDH同版本的Hadoop环境,如果没有,欢迎看最简单易读的搭建hadoop伪分布式环境教程

一、Sqoop的下载

CDH版本的相关软件包都可以通过Cloudera的官方下载链接进行下载,在这里为大家贴上对应地址:
Sqoop下载链接
进入后本教程选择5.3.6下的Sqoop1.4.5版本进行下载

在这里插入图片描述

二、Sqoop的安装及环境配置

1.Sqoop安装

进入Sqoop安装包的下载目录,输入tar -zxvf sqoop-1.4.5-cdh5.3.6.tar.gz -C 解压目的地进行解压,Done!

2.配置文件设置

进入Sqoop安装目录下的conf文件夹内,将sqoop-env-template.sh文件重命名为sqoop-env.sh,修改如下代码:

# Set Hadoop-specific environment variables here.

#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/opt/cdh5.3.6/hadoop-2.5.0-cdh5.3.6

#Set path to where hadoop-*-core.jar is available
export HADOOP_MAPRED_HOME=/opt/cdh5.3.6/hadoop-2.5.0-cdh5.3.6

其中变量的值修改为自己的Hadoop安装目录即可,关于下面Hbase、Zookeeper等其他框架的环境变量,已经安装好就填写进去,没有也没关系。

总结

至于Sqoop的基本使用方法,欢迎点击我的其他博客,我们一同学习!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值