ETL工具Sqoop使用-数据共享与整合技术

ETL工具Sqoop使用实验

实验目的：

1. 掌握ETL工具Sqoop的使用
2. 掌握MySQL和HDFS之间的数据转换

实验要求：

1. 掌握ETL工具Sqoop的使用
2. 能够正常操作数据库、表、数据

实验环境： 

1. 一台独立PC或虚拟机
2. 每台主机内存2G以上，磁盘剩余空间500M以上
3. 已安装CentOS 7.4操作系统
4. 已安装JDK
5. 已完成Hadoop平台的搭建
6. 已完成Mysql数据库平台的搭建
7. 已完成Hbase的安装
8. 已完成hive的安装
9. 已完成Sqoop工具的安装

一：启动

1,在集群中所有主机上使用命令“zkServer.sh start”启动Zookeeper服务脚本，然后使用命令“zkServer.sh status”查看节点当前状态

2.在主节点使用命令“star-all.sh”启动Hadoop集群，在备用主节点使用命令“yarn-daemon.sh start resourcemanmger”启动YARN主节点服务