sqoop1.4.6的安装和配置

一、环境与软件

操作系统:Red Hat 4.8.3-9

Apache hadoop: 2.7.2

Apache Zookeeper:3.4.9

Apache Sqoop: 1.4.6

mysql JDBC:5.1.4


1、登录 linux 81,拥有root权限
2、cd /opt
3、下载sqoop 的包    wget  
4、tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz
5、配置环境变量
vi /etc/profile
export SQOOP_HOME=/opt/sqoop-1.4.6.bin__hadoop-2.0.4-alpha
export PATH=$PATH:$SQOOP_HOME/bin  
source /etc/profile
6、 Sqoop根目录下,进入conf目录,找到其中的sqoop-env-template.sh,复制成sqoop-env.sh:
修改其中的环境变量,此处使用的主要是四个:
  1. #Set path to where bin/hadoop is available  
  2. export HADOOP_COMMON_HOME=${HADOOP_HOME}  
  3.   
  4. #Set path to where hadoop-*-core.jar is available  
  5. export HADOOP_MAPRED_HOME=${HADOOP_HOME}  
  6.   
  7. #set the path to where bin/hbase is available  
  8. export HBASE_HOME=${HBASE_HOME}  
  9.   
  10. #Set the path for where zookeper config dir is  
  11. export ZOOCFGDIR=${ZOOKEEPER_HOME}/conf 

注:若未安装zookeeper,需先安装zookeeper

7、 检测使用: bin/sqoop help  
注意,这里可能会报警告: 

Warning: /home/hadoop/deploy/sqoop-1.4.6.bin__hadoop-2.0.4-alpha//../hcatalog does not exist! HCatal ;

Warning: /home/hadoop/deploy/sqoop-1.4.6.bin__hadoop-2.0.4-alpha//../accumulo does not exist! Accumulo imports will fail.

这主要是因为集群中没有安装HCatal和accumulo环境变量,但sqoop默认会检测这两个组件。若非要去掉这两个检测,可以修改bin/config-sqoop文件,很容易找到这两个组件的检测位置。 


  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值