ETL工具Sqoop使用实验
实验目的:
- 掌握ETL工具Sqoop的使用
- 掌握MySQL和HDFS之间的数据转换
实验要求:
- 掌握ETL工具Sqoop的使用
- 能够正常操作数据库、表、数据
实验环境:
- 一台独立PC或虚拟机
- 每台主机内存2G以上,磁盘剩余空间500M以上
- 已安装CentOS 7.4操作系统
- 已安装JDK
- 已完成Hadoop平台的搭建
- 已完成Mysql数据库平台的搭建
- 已完成Hbase的安装
- 已完成hive的安装
- 已完成Sqoop工具的安装
一:启动
1,在集群中所有主机上使用命令“zkServer.sh start”启动Zookeeper服务脚本,然后使用命令“zkServer.sh status”查看节点当前状态
2.在主节点使用命令“star-all.sh”启动Hadoop集群,在备用主节点使用命令“yarn-daemon.sh start resourcemanmger”启动YARN主节点服务