OGG同步数据到Hadoop平台（Kafka）

 

需求

                                                

系统部署图

  需求很简单，就是从数据中心利用OGG同步数据到应用系统中的kafka。整理如下

环境清单

名称	系统版本	IP地址	OGG版本	其他服务
源端	Linux version 3.8.13-68.3.4.el6uek.x86_64	192.168.1.41	Version 12.3.0.1.0 OGGCORE_12.3.0.1.0_PLATFORMS_170721.0154_FBO	Oracle Release 12.2.0.1.0 Production
目的端	Linux version 3.10.0-514.el7.x86_64	192.168.3.63	Version 12.3.0.1.0 OGGCORE_OGGADP.12.3.0.1.0GA_PLATFORMS_170828.1608	kafka_2.12-2.0.0 zookeeper-3.4.13

准备

下载

zookeeper：http://zookeeper.apache.org/releases.html#download

kafka：http://kafka.apache.org/downloads

ogg：http://www.oracle.com/technetwork/middleware/goldengate/downloads/index.html

文件自行下载，需说明的是源端和目标端的文件不一样，源端需要下载Oracle GoldenGate for Oracle，目标端需要下载Oracle GoldenGate for Big Data,

安装

根据说明安装相关的软件，并做好相关的配置，如环境变量、网络防火墙等，不在细说，不明白的问度娘

这里列举一下自己的安装路径：

文件安装清单

名称	OGG	Oracle	zookeeper	kafka
源端	/oracle/app/ogg123