sqoop配置

一.简介
Sqoop是一种旨在在Hadoop与关系数据库或大型机之间传输数据的工具。您可以使用Sqoop将数据从MySQL或Oracle等关系数据库管理系统(RDBMS)或大型机导入Hadoop分布式文件系统(HDFS),在Hadoop MapReduce中转换数据,然后将数据导出回RDBMS 。
sqoop官网:http://sqoop.apache.org/docs/1.4.6/SqoopUserGuide.html

二.安装
1、解压sqoop

[root@master app]# pwd
/root/app
[root@master app]# tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/local/src/

2、环境变量

[root@master app]# vi ~/.bash_profile
export SQOOP_HOME=/usr/local/src/sqoop-1.4.7.bin__hadoop-2.6.0
export PATH=$PATH:$SQOOP_HOME/bin
[root@master app]# source ~/.bash_profile

3、进入sqoop/conf/复制模板

[root@master conf]# cp sqoop-env.template.sh sqoop-env.sh
[root@master conf]# vi sqoop-env.sh

4、sqoop-env.sh的添加内容

export HADOOP_COMMON_HOME=/usr/local/src/hadoop-2.6.0
export HADOOP_MAPRED_HOME=/usr/local/src/hadoop-2.6.0
export HIVE_HOME=/usr/local/src/hive-1.2.2
export ZOOKEEPER_HOME=/usr/local/src/zookeeper-3.4.5


export JAVA_HOME=/usr/java/jdk1.8.0_111
export HADOOP_HOME=/home/sofware/hadoop-2.9.2
export HIVE_HOME=/home/sofware/hive-2.3.6

[root@master conf]# source sqoop-env.sh

5、拷贝jar包——详细请看关于 jar包下载
[root@master lib]# cp /usr/local/src/hive-1.2.2/lib/mysql-connector-java-5.1.46-bin.jar /usr/local/src/sqoop-1.4.7.bin__hadoop-2.6.0/lib/

6,创建目录

[root@master ~]# cd /usr/local/src/sqoop-1.4.7.bin__hadoop-2.6.0/..
[root@master src]# mkdir hcatalog accumulo

7、运行:

[root@master conf]# sqoop help

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值