Sqoop安装配置及异常解决
一 Sqoop安装
安装 Sqoop 的前提是已经具备 Java 和 Hadoop、Hive、ZooKeeper、HBase 的 环境。
链接: Java环境配置.
链接: Hadoop安装配置.
链接: Hive安装配置.
链接: Zookeeper安装配置.
链接: HBase安装配置.
二 下载并解压
1 安装包
链接: Sqoop下载地址.提取码: pugs
2 上传安装包 sqoop-1.4.6-cdh5.14.2.tar.gz 到虚拟机中
3 解压 sqoop 安装包到指定目录
tar -zxvf sqoop-1.4.6-cdh5.14.2.tar.gz -C /opt
4 改名
mv sqoop-1.4.6-cdh5.14.2 sqoop
5 配置环境变量
vi /etc/profile
添加如下内容:
export SQOOP_HOME=/opt/sqoop
export PATH=$SQOOP_HOME/bin:$PATH
让配置文件生效:source /etc/profile
三 修改配置文件
- Sqoop 的配置文件与大多数大数据框架类似,在 sqoop 根目录下的 conf 目录 中。
cd /opt/sqoop/conf
1 重命名配置文件
mv sqoop-env-template.sh sqoop-env.sh
2 修改配置文件
vi sqoop-env.sh
可以直接找一个位置添加下方代码
export HADOOP_COMMON_HOME=/opt/hadoop2.6.0
export HADOOP_MAPRED_HOME=/opt/hadoop2.6.0
export HBASE_HOME=/opt/hbase
export HIVE_HOME=/opt/hive
export ZOOKEEPER_HOME