准备环境
HDFS集群的安装
Hbase集群的安装
Hive的安装(搭了,但是没写博客。。。。)
Zookeeper的安装(链接里面第八步)
sqoop安装包
操作步骤
1、使用命令tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz
解压该安装包。
2、解压后的文件改名。命令:mv sqoop-1.4.7.bin__hadoop-2.6.0 sqoop-1.4.7
。
2、配置环境变量
3、进入conf目录,目录如下:
4、使用命令cp sqoop-env-template.sh sqoop-env.sh
将sqoop-env-template.sh复制一份,命名为sqoop-env.sh。
5、编辑配置文件sqoop-env.sh。
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HBASE_HOME=$HBASE_HOME
export HIVE_HOME=$HIVE_HOME
export ZOOCFGDIR=$ZOOKEEPRER_HOME/conf
6、把mysql的jar放到sqoop的lib目录下(mysql-connector-java-5.1.35-bin.jar)。
7、使用sqoop连接mysql,并且显示mysql的tables。命令:sqoop list-tables --connect jdbc:mysql://node01/test --username root --password 123
。