【goldengate】官方文档笔记三 Oracle GoldenGate 实时报表

这篇文档循序渐进的讲述了OGG在适时复制的几种配置方案。从最基本的配置开始讲起,逐渐加入新的进程,加入新的策略,配置也随之改变。下面从最基础的配置说起。

报表配置
一对一复制是OGG最基本的配置方案:从源端数据库到目标数据库复制数据。在目标端从事报表和分析工作,实现OLTP和OLAP分离。

创建一个标准的报表配置
标准的OGG配置是一个提取组(Extract group)将捕获的数据通过TCP/IP发送给目标系统的trail文件中,复制组(Relicat group)从trail中读取数据,执行sql语句重演DML和DDL语句,实现数据的同步复制。

SOURCEdb ---&gt EXTRACT ---&gt TCP/IP ---&gt RMTTRAIL ---&gt REPLICAT ---&gt TARGETdb

源端系统
配置管理进程(Manager process)
1,在源端配置管理进程,参见笔 【goldengate】官方文档笔记一
http://blog.itpub.net/29047826/viewspace-1249506/

配置提取进程组(Extract group)
2,在源端,使用ADD EXTRACT 命令来创建一个提取组(Extract group),取名为ext
ADD EXTRACT , {TRANLOG | INTEGRATED TRANLOG}, BEGIN [, THREADS ]

3,在源端,使用ADD RMTTRAIL命令来在目标系统上指定目标主机的trail文件(remote trail)。参数EXTRACT将trail文件和提取组向关联。
ADD RMTTRAIL , EXTRACT

4,在源端,使用EDIT PARAMS命令为提取组(Extract group)创建参数文件。
-- 为提取组指定名称 EXTRACT
-- OGG管理用户登录数据的用户名和密码
[SOURCEDB ][, USERID [, PASSWORD []]
--
指定目标系统的IP地址,端口号和加密方式
RMTHOST , MGRPORT , ENCRYPT
-- 指定远程trail和加密方式
ENCRYPTTRAIL [] RMTTRAIL
-- 指定要捕获的表 TABLE .

目标端系统
创建管理进程
5,在源端配置管理进程,参见笔 【goldengate】官方文档笔记一
http://blog.itpub.net/29047826/viewspace-1249506/

6,在管理进程(Manager process)参数文件,使用PURGEOLDEXTRACTS参数控制来自源端trail的删除工作。

配置复制组(Replicat group)
7,在目标端,创建复制检查点表(Replicat checkpoint table)。

8,在目标端,使用ADD REPLICAT命令来创建复制组(Relicate group)。使用EXTTRAIL参数将复制组(Replicate group)和remote trail文件相关联。告诉复制进程从哪里获取文件。
ADD REPLICAT , EXTTRAIL , BEGIN

9,在目标端,使用EDIT PARAMS命令来创建复制组(Replicat group)参数文件。
-- 为Replicat group指定名称 REPLICAT -- State whether or not source and target definitions are identical: SOURCEDEFS | ASSUMETARGETDEFS -- OGG管理用户登录数据库的用户名和密码 [TARGETDB ][, USERID ][, PASSWORD []] -- Specify error handling rules: -- Specify decryption if trail is encrypted: DECRYPTTRAIL REPERROR (, ) -- 关联源库和目标库的表名称 MAP .


添加投递进程 data pump

在刚才最基础配置完成后,我们可以再完善一下网络传输上的可靠性。在提取进程(Extract)和TCP/IP网络连接之间加入一个进程,datapump。给它起一个贴切的中文名“投递进程”。投递进程也是提取进程中的一种,可以称为二次提取进程。它在源端的trail中读取信息,通过TCP/IP投递(发送)到目标端的trail文件中。投递进程虽然不是必须配置的,但是为了系统的性能和可靠性建议配置。通过下面的简图,可以看下投递进程datapump所处的位置。

SOURCEdb ---&gt EXTRACT ---&gt DataPump ---&gt TCP/IP ---&gt RMTTRAIL ---&gt REPLICAT ---&gt TARGETdb

配置投递进程组(data pump Extract group)
在源端,使用ADD EXTRACT命令来创建一个投递进程组,指令如下:
ADD EXTRAIL , EXTTRAILSOURCE , BEGIN

EXTTRAILSOURCE:该参数指的是源端trail文件路径,投递进程从该路径读取trail后发送给目标端

在源端,使用ADD RMTTRAIL命令来指定在目标端将要创建的remote trail。
ADD RMTTRAIL , EXTRACT

EXTRACT: 该参数将源端的投递进程(data pump)与目标端的trail相连接。

总结一下上面的内容:
新增加的这个投递进程是一个搬运工,在源端工作。它通过 EXTTRAILSOURCE找到本地的trail文件,读取该文件,在通过RMTTRAIL参数找到远程trail文件路径,投递过去。

使用EDIT PARAMS命令在源端为投递进程创建参数文件
-- 指定投递进程组:EXTRACT -- 指定OGG管理用户登录用户名和口令:[SOURCEDB ][, USERID ][, PASSWORD

[]]
-- 如果输入的trail被加密了,请指定:
DECRYPTTRAIL < 加密选项 >
-- 指定目标系统的主机名和ip地址
-- 通过TCP/IP传递数据的加密方式:
RMTHOST , MGRPORT , ENCRYPT
-- 指定目标端trail文件的加密方式[]
RMTTRAIL
-- 指定捕获对象:
TABLE .

当源端数据库与目标数据库不在一个网络中,可以在一个中介系统里创建投递进程,该进程在整个部署中成为一个二传手。
源端数据库的投递进程读取本local trail后投递(写到)到中介系统中的trail,中介系统中的投递进程(二传手)读取中介系统中的trail投递到目标端。

在配置中需要修改的地方如下:
在源端的投递进程参数中需要将RMTHOST的IP设置为中介地址,RMTTRAIL需要设置为中介trial路径

在中介系统中需要配置如下内容:
1,配置管理进程Manager process,方法同源库相同。
2,在Manager参数文件中使用 PURGEOLDEXTRACTS来控制trail删除策略
3,配置投递进程组,取名为pump_2
ADD EXTRACT , EXTTRAILSOURCE , BEGIN

EXTTRAILSOURCE:该参数指定中介系统中trail文件路径

4,使用ADD RMTTRAIL指定目标数据库trail位置
ADD RMTTRAIL , EXTRACT

EXTRACT:该参数指明刚刚创建的“中介投递进程”将数据写入目标数据库的trail文件。

下面看看投递进程的配置文件
-- Identify the data pump group:
EXTRACT
-- Note that no database login parameters are required in this case.
-- State whether or not source and target definitions are identical: SOURCEDEFS | ASSUMETARGETDEFS
-- Specify the target definitions file if SOURCEDEFS was used: TARGETDEFS
-- Specify decryption if input trail is encrypted:
DECRYPTTRAIL
-- Specify the name or IP address of the target system
-- and optional encryption of data over TCP/IP:
RMTHOST , MGRPORT , ENCRYPT -- Specify the remote trail and encryption options on the target system: ENCRYPTTRAIL []
RMTTRAIL
-- Allow mapping, filtering, conversion or pass data through as-is; [PASSTHRU | NOPASSTHRU]
-- Specify tables to be captured:
TABLE .
文档最后还有一部分是级联配置,也就是双向复制,就不在此列出了。

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/29047826/viewspace-1253400/,如需转载,请注明出处,否则将追究法律责任。

user_pic_default.png
请登录后发表评论 登录
全部评论
<%=items[i].createtime%>

<%=items[i].content%>

<%if(items[i].items.items.length) { %>
<%for(var j=0;j
<%=items[i].items.items[j].createtime%> 回复

<%=items[i].items.items[j].username%>   回复   <%=items[i].items.items[j].tousername%><%=items[i].items.items[j].content%>

<%}%> <%if(items[i].items.total > 5) { %>
还有<%=items[i].items.total-5%>条评论 ) data-count=1 data-flag=true>点击查看
<%}%>
<%}%> <%}%>

转载于:http://blog.itpub.net/29047826/viewspace-1253400/

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值