sqoop2安装配置

本文详细介绍了如何在CDH环境下安装配置sqoop2,包括下载cdh版本的sqoop2,解压,添加环境变量,修改配置文件如sqoop.properties和catalina.properties,并启动sqoop服务端和客户端。配置过程中涉及到替换hadoop相关jar包路径,以及添加MySQL驱动到服务器lib目录。最后,提供了连接server的步骤。
摘要由CSDN通过智能技术生成

下载

因为公司集群是cdh版本的,所以这里下载的是cdh版本的sqoop2,网址:http://archive.cloudera.com/cdh5/cdh/5/(注意下载的是sqoop2而不是sqoop),这里下载的是1.99.5版本,各版本之间在命令行语法上有些差别,具体可以在官网中查看(文章最后有1.99.5版本的使用案例网址)

解压

下载完成后上传至需要安装的节点,最好上传至有hadoop和hbase节点的机器,然后在合适的目录下解压。
sqoop2与sqoop1有很大的区别,使用的是server-client模式,在一个节点安装好后,在其他任何节点都可以访问。

添加环境变量



添加如上图红框内所示的环境变量,之后记得source环境变量文件。

修改配置

1. $SQOOP_HOME/conf/sqoop.properties文件



org.apache.sqoop.submission.engine.mapreduce.configuration.directory改为当前hadoop

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值