大数据Sqoop数据的采集和迁移教程:
大数据Sqoop教程丨从零开始讲解大数据业务及数据采集和迁移需求
Sqoop的安装配置非常简单,前提是部署Sqoop工具的机器需要具备Java和Hadoop的运行环境。接下来,采用Sqoop-1.4.6来讲解Sqoop的安装配置,下载地址http://archive.apache.org/dist/sqoop/1.4.6/。
1.Sqoop安装
首先将下载好的安装包上传至hadoop01主节点的/export/software目录中,并解压至/export/servers路径下,然后对解压包进行重命名,具体指令如下。
执行完上述Sqoop的下载解压后,就完成了Sqoop的安装。
2**.Sqoop**配置
(1)先进入Sqoop解压包目录中的conf文件夹目录下,将sqoop-env-template.sh文件复制并重命名为sqoop-env.sh,对该文件中的如下内容进行修改。
在sqoop-env.sh配置文件中,需要配置的是Sqoop运行时必备环境的安装目录,Sqoop运行在Hadoop之上,因此必须指定Hadoop环境。另外,在配置文件中还要根据需要自定义配置Hbase、Hive和Zookeeper等环境变量(例如本章后续将