sqoop安装配置
开篇碎碎念:
此文章写于我做项目途中,从hive将数据传递给mysql数据库需要安装sqoop,途中踩了很多坑,就把这些记录下来。
安装sqoop之前,java和hadoop的安装都是必须的,以及hive和mysql的安装我写成了另一篇文章,可以去我空间找。相关下载网盘链接为了方便我也放在了里面(顺便一提阿里云盘真香)。
下面进入正题。
文章目录
Sqoop是Hadoop和关系数据库服务器之间传送数据的一种工具。它是用来从关系数据库如:MySQL,Oracle到Hadoop的HDFS,并从Hadoop的文件系统导出数据到关系数据库。
1. 验证java安装
在安装Sqoop之前,需要确定是否已经在系统上安装Java。用下面的命令来验证Java安装:在安装Sqoop之前,需要确定是否已经在系统上安装Java。用下面的命令来验证Java安装:
java -version
如果Java已经安装在系统上,应该能看到如下回应:
2. 验证Hadoop安装
在安装Sqoop之前Hadoop必须在系统上安装。使用下面的命令来验证Hadoop的安装:
cd /usr/local/hadoop
./bin/hadoop version