Oracle GoldenGate

   GoldenGate TDM(交易数据管理)软件是一种基于日志的结构化数据复制软件,它通过解析源数据库在线日志或归档日志获得数据的增删改变化,再将这些变化应用到目标数据库,实现源数据库与目标数据库同步、双活。GoldenGate TDM 软件可以在异构的IT基础结构(包括几乎所有常用操作系统平台和数据库平台)之间实现大量数据亚秒一级的实时复制


一、OGG工作模式:


二、OGG进程。

Manager进程是GoldenGate的控制进程,运行在源端和目标端上。它主要作用有以下几个方面:启动、监控、重启Goldengate的其他进程,报告错误及事件,分配数据存储空间,发布阀值报告等。在目标端和源端有且只有一个manager进程.


Extract运行在数据库源端,负责从源端数据表或者日志中捕获数据。Extract的作用可以

按照阶段来划分为:

– 初始时间装载阶段:在初始数据装载阶段,Extract进程直接从源端的数据表中抽取数据

– 同步变化捕获阶段:初始数据同步完成以后,Extract进程负责捕获源端数据的变化(DML和DDL)


pump进程(可选)运行在数据库源端,其作用是将源端产生的本地trail文件,把trail以数据块的形式通过TCP/IP 协议发送到目标端,这通常也是推荐的方式。pump进程本质是extract进程的一种特殊形式,如果不使用trail文件,那么extract进程在抽取完数据以后,直接投递到目标端,生成远程trail文件。


Server Collector进程与 Pump进程对应,这个进程不需要引起我的关注,因为在实际操作过程中,无需我们对其进行任何配置,所以对我们来说它是透明的。它运行在目标端,其 任务就是把Extract/Pump投递过来的数据重新组装成远程ttrail文件。


Replicate进程,通常我们也把它叫做应用进程。运行在目标端,是数据传递的最后一站,负责读取目标端trail文件中的内容,并将其解析为DML或 DDL语句,然后应用到目标数据库中。


三、OGG checkpoint


checkpoint用于抽取或复制失败后(如系统宕机、网络故障),抽取、复制进程重新定位抽取或者复制的起点。


extract进程在数据源和trail文件中都会标识checkpoint,Replicat只会在trail文件中标示checkpoint。


存放在GGHOME\dirchk下的文件中


存放在数据库指定的表中,需要单独配置



四、GoldenGate关键特性

1.对生产系统影响小

– 实时读取交易日志,以低资源占用实现大交易量数据实时复制


2.以交易为单位复制,保证交易一致性


3.高性能

– 智能的交易重组和操作合并

– 使用数据库本地接口访问

– 并行处理体系


4.灵活的拓扑结构

– 支持一对一、一对多、多对一、多对多和双向复制等


5.支持数据过滤和转换

– 可以自定义基于表和行的过滤规则.

– 可以对实时数据执行灵活影射和变换.


6.提供数据压缩和加密

– 降低传输所需带宽,提高传输安全性.


五、OGG如何写trail文件


1.为了减小系统的I/O负载,抽取的数据通过大字节块的方式存储到trail文件中。同时为了提高兼容性,存储在trail文件中的数据以通用数据模式(一种可以在异构数据库之间进行快速而准确转换的模式)存储。

2.默认情况下,extract进程以追加的方式写入trail文件。当extract进程异常终止时,trail文件会被标记为需要恢复。当extract重新启动时会追加checkpoint之后的数据追加到该trail文件中。



本文出自 “无双城” 博客,请务必保留此出处http://929044991.blog.51cto.com/1758347/1275700

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值