ogg extract 参数配置

最新推荐文章于 2023-03-10 17:04:24 发布

liweihadoop

最新推荐文章于 2023-03-10 17:04:24 发布

阅读量3.8k

点赞数

分类专栏： oracle

本文链接：https://blog.csdn.net/u010409445/article/details/51240152

版权

这篇博客详细介绍了如何配置GoldenGate的extract参数，包括添加本地队列、设置extract进程、用户认证、数据捕获选项、日志管理以及特定表的处理。通过示例展示了如何设置ADD EXTRACT、ADD EXTTRAIL、EDITPARAM等命令，以实现高效的数据迁移和跟踪。

摘要由CSDN通过智能技术生成

GGSCI>ADD EXTRACT cw_ext1, tranlog, begin now, threads 2

添加本地队列t1，cw_ext1进程捕捉到的有效数据将写入本地队列

GGSCI>ADD EXTTRAIL ./dirdat/t1, EXTRACT cw_ext1,megabytes 100

为cw_ext1进程配置参数

GGSCI>editparam yx_ext1

EXTRACT cw_ext1

setenv(NLS_LANG="AMERICAN_AMERICA.ZHS16GBK")

userid goldengate,password hljorarz

GETTRUNCATES /*抓取truncate table操作

REPORTCOUNT EVERY 1 MINUTES, RATE

numfiles 5000

DISCARDFILE./dirrpt/cw_ext1.dsc,APPEND,MEGABYTES 1000

DISCARDROLLOVER AT 3:00

DDL &

INCLUDE MAPPED &

--OPTYPE alter &

OBJTYPE 'TABLE '

DDLOPTIONS ADDTRANDATA

WARNLONGTRANS 2h,CHECKINTERVAL 3m

EXTTRAIL ./dirdat/t1,MEGABYTES 100

DYNAMICRESOLUTION

TRANLOGOPTIONS EXCLUDEUSER goldengate

TRANLOGOPTIONS RAWDEVICEOFFSET 0

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

liweihadoop

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

OGG安装与配置.docx

10-11

- 编辑目标端globals参数：根据实际需求调整全局配置参数。 - 创建表定义文件：定义目标端的表结构，使OGG知道如何处理数据。 - 配置目标rep复制进程：设置接收并应用数据的进程。 1.5. OGG日常维护 - 进入ogg控制...

OGG 拆分EXTRACT进程

leo__1990的博客

06-17

1807

1. OGG 拆分EXTRACT进程 1.1. OGG 拆分EXTRACT进程进程拆分注意事项： —各进程间没有同步机制，应尽量确保同一交易涉及表在一个进程，以业务或Schema进行区分。 —单个extract进程可处理日志一般为30-50G/小时，单个replicat进程一般只能处理1G队列/小时，可采用一个extract对多个replicat的模式。 —由于extract在catch ...

参与评论您还未登录，请先登录后发表或查看评论

【大数据开发运维解决方案】ogg(GoldenGate)三大进程常用参数

热门推荐

赵延东的一亩三分地

05-02

16万+

oggCI (ogg1) 22> edit params mgr PORT 7809 DYNAMICPORTLIST 7810-7860 AUTORESTART ER , RETRIES 3, WAITMINUTES 5 PURGEOLDEXTRACTS ./dirdat/pd, 参数说明： PORT 7809 管理进程的监听端口，默认使7809，当7809不可用时会从DYNAMICPORTLIST定义的列表中选择一个可用的端口，主要用于本地goldengate进程之间的通信 DYNAMICPORTL

关于oracle的OGG按条件抽取数据的方法

kisszhou123的博客

03-10

775

最近收到个OGG的需求，需要每个表按一个字段的内容抽取数据，网上查了很久都是些零零碎碎的东西，写的也不是很清楚。研究了很久终于搞定了，写下来分享下希望别人少走弯路。table 数据库名.表名 filter (@STRFIND(字段名,'该字段内容') >0);3、还是有个小问题，就是update主键和cols里字段的语句不会抽取，目前还没找到解决办法。该字段内容就是你想抽取的条件，比如字段里内容为“1”的整行数据都抽取。add trandata 数据库名.表名,cols(字段名)1、首先表级日志这么写。

ogg 运维命令

weixin_43564627的博客

06-08

1675

ogg 运维命令 -管理进程命令 INFO MANAGER 返回有关管理器端口和进程id的信息。 START MANAGER 开启管理进程 STATUS MANAGER 返回管理进程状态 STOP MANAGER 停止管理进程 --采集进程命令 ADD EXTRACT 添加一个采集组 ALTER EXTRACT 更改采集组的属性 CLE

OGG 21c 远程捕获进程延迟问题处理

JiekeXu的博客

11-15

818

作者 | JiekeXu来源 |公众号 JiekeXu DBA之路（ID: JiekeXu_IT）如需转载请联系授权 |(个人微信 ID：JiekeXu_DBA)大家好，我是 JiekeXu,很高兴又和大家见面了,今天和大家一起来看看 OGG 21c 远程捕获进程延迟问题处理，欢迎点击上方蓝字“JiekeXu DBA之路”关注我的公众号，标星或置顶，更多干货第一时间到达！前面几天发布了一篇使用 ...

OGG基础知识总结

yuxiaoyanranxt的博客

04-23

1346

OGG基础知识整理 1 GoldenGate介绍 GoldenGate软件是一种基于日志的机构化数据复制软件，能够实现大量交易数据的实时捕捉，变化和投递，实现源数据库与目标数据库的数据同步，保持压秒级的数据延迟。 GoldenGate能够支持多种拓扑结构，包括一对一，一对多，多对一，层叠和双向复制等。 GoldenGate基本架构图 1.1 Oracle GoldenGate主要组件 Extr...

ogg的extract的拆分方法

congcong112233的博客

02-26

476

ogg的extract的拆分方法 0.背景 OGG 在部署以后，随着业务压力的增大，可能需要增加多个group来处理数据同步，在这种情况下，就需要对原有的OGG 进程拆分，同时也不能...

OracleGoldengate(Ogg)参数详解

06-13

Oracle GoldenGate（OGG）是一种数据集成和实时数据复制解决方案，通过参数配置来控制其行为。本文将对 OGG 参数进行详解，从 Manager 进程到 Extract、Pump 和 Replicat 进程的配置参数进行介绍。 Manager 进程...

OGG配置DDL数据同步

04-11

### OGG配置DDL数据同步详解 #### 摘要 Oracle GoldenGate (简称OGG) 是一款强大的数据复制工具，能够实现跨平台的数据同步。本文将深入探讨如何使用OGG来配置并执行DDL（Data Definition Language）数据同步，...

LINUX安装OGG及配置

07-04

### LINUX环境下GoldenGate (OGG) 的安装与配置详解 #### 一、概述 GoldenGate (简称 OGG) 是一款高性能的数据复制软件，能够实现跨平台、跨数据库类型的实时数据复制。本文将详细介绍如何在Linux环境下安装配置OGG...

OGG安装运维及常用函数.docx

06-24

本文将详细介绍OGG的安装、配置以及日常运维中的常用函数。一、OGG安装 OGG的安装有两种方式：图形界面安装和静默安装。 1. 图形界面安装： - 创建OGG安装目录，例如 `/u01/app/product/ogg`。 - 配置环境变量...

新建OGG的E、P、R进程

weixin_44072478的博客

06-04

1916

在终端上新建OGG的E,P,R进程 1、配置E进程 ADD EXTRACT(进程名), TRANLOG,THREADS 2,BEGIN NOW ADD EXTTRAIL /xdata/ogg_source/dirdat/bb(ogg源端trail目录，bb为trail名), EXTRACT (进程名) MEGABYTES 200 GGSCI (fdc2) 1> edit params (进程名) extract (进程名) GETUPDATEBEFORES NOCOMPRESSDELET

ogg修改extract进程从当前抽取

在路上

02-19

1万+

因为是测试环境，几个月之前创建的ogg再次打开，源端目标端表结构已经面目全非，然后就新建了一个表，重新开始同步，但是抽取进程不是现在： GGSCI (single1) 12> info all Program Status Group Lag at Chkpt Time Since Chkpt MANAGER RUNNING

OGG 添加extract失败 OGG-01756

Sharon--start focusing on Oracle

04-01

3906

--添加extract进程出错 GGSCI > add extract extcus44,tranlog,beginnow 2014-04-01 13:10:01 WARNING OGG-01756Cannot register EXTRACT EXT1 with database because of the following SQL error: OCIError ORA-06550:

OGG不同表指定不同extract、dump、replicat

Lissen_Gan的博客

02-12

726

注意：每个extract对应一个dump和replicat，有多个个extract就有多少个dump和replicat 1.1 环境准备 create tablespace test_tbs datafile '/u01/app/oracle/oradata/ggg11g/test_tbs01.dbf' size 10M autoextend on maxsize unlimited; create user test identified by test account unlock default.

OGG12.2如何extract LOB数据

lijingkuan的博客

08-29

2815

Fusion Middleware Installing and Configuring Oracle GoldenGate for Oracle Database（12.2.0.1）1.6.7 Large Object Data Types支持的数据类型： CLOB NCLOB BLOB SECUREFILE和BASICFILE 1.6.7.1 integrated和classic捕获方式通用的限

OGG抽取进程中为什么设置tranlogoptions rawdeviceoffset 0

weixin_30933531的博客

05-16

225

　　 Extract: Block size mismatch (8192/512)…裸设备的偏移量各操作系统默认为0，但AIX默认为4096。当创建裸设备时使用了-TO选项时，Oracle不会跳过4096字节而是直接从0开始读写。因此在AIX下使用裸设备时，出现此错误需要指定OGG从偏移量0开始读取。转载于:https://www.cnblogs.com/ericli/articles/5...

机械原理课程设计破碎机.doc