Monitoring GoldenGate Processing

最新推荐文章于 2024-11-15 18:38:47 发布
最新推荐文章于 2024-11-15 18:38:47 发布
阅读量126 收藏
点赞数
文章标签： 数据库 runtime
bb
Overview monitoring tools
  • GGSCI information commands 
  • The ggserr.log file (error log)
  • Process report
  • The discard files
  • The logs at operating-system level
Using the information commands in GGSCI
1. info all
Gives you a good indicator of your overall health.

GGSCI (cora) 13> info all
Program     Status      Group       Lag at Chkpt  Time Since Chkpt

MANAGER     RUNNING
EXTRACT     RUNNING     LEMP1       164:49:14     00:00:07
EXTRACT     RUNNING     PEMP1       165:14:16     00:00:03
REPLICAT    STOPPED     REMP2       00:00:00      329:58:44
注意: 一般正常的情况下， Lag at Chkpt  的值应该为0，而 Time Since Chkpt 应该小于10秒。

2. info lemp1 [ detail ]
Run status, checkpoints, approximate lag.Add detail to show current environmental information.
该命令给出当前进程组的状态、进程启动时间、lag信息、读写信息以及与该进程相对应的目录信息等等。

GGSCI (cora) 14> info lemp1 detail

EXTRACT    LEMP1     Last Started 2012-11-26 10:18   Status RUNNING
Checkpoint Lag       00:00:00 (updated 00:00:01 ago)
Log Read Checkpoint  Oracle Redo Logs
                     2012-11-26 10:19:21  Seqno 28, RBA 10964480
                     SCN 0.1390403 (1390403)

  Target Extract Trails:

  Remote Trail Name                                Seqno        RBA     Max MB

  /u01/app/gg/dirdat/l1                               18       1034        100

  Extract Source                          Begin             End

  /u01/app/oracle/oradata/orcl11/redo01.log  2012-11-19 13:28  2012-11-26 10:19
  /u01/app/oracle/oradata/orcl11/redo03.log  2012-11-19 09:33  2012-11-19 13:28
  /u01/app/oracle/oradata/orcl11/redo02.log  2012-11-16 16:14  2012-11-19 09:33
  /u01/app/oracle/oradata/orcl11/redo02.log  2012-11-16 11:00  2012-11-16 16:14
  /u01/app/oracle/oradata/orcl11/redo02.log  2012-11-14 11:29  2012-11-16 11:00
  /u01/app/oracle/oradata/orcl11/redo01.log  2012-11-14 11:25  2012-11-14 11:29
  /u01/app/oracle/oradata/orcl11/redo01.log  2012-11-13 14:34  2012-11-14 11:26
  /u01/app/oracle/oradata/orcl11/redo03.log  * Initialized *   2012-11-13 14:34
  /u01/app/oracle/oradata/orcl11/redo03.log  2012-11-13 13:05  2012-11-13 14:34
  /u01/app/oracle/oradata/orcl11/redo03.log  2012-11-09 15:58  2012-11-13 13:05
  /u01/app/oracle/oradata/orcl11/redo02.log  * Initialized *   2012-11-09 15:58
  /u01/app/oracle/oradata/orcl11/redo02.log  2012-11-09 13:22  2012-11-09 15:36
  /u01/app/oracle/oradata/orcl11/redo02.log  * Initialized *   2012-11-09 13:22
  /u01/app/oracle/oradata/orcl11/redo02.log  2012-11-09 09:49  2012-11-09 13:18
  /u01/app/oracle/oradata/orcl11/redo01.log  * Initialized *   2012-11-09 09:49
  /u01/app/oracle/oradata/orcl11/redo01.log  2012-11-09 09:24  2012-11-09 09:37
  /u01/app/oracle/oradata/orcl11/redo01.log  * Initialized *   2012-11-09 09:24
  /u01/app/oracle/oradata/orcl11/redo01.log  2012-11-08 16:15  2012-11-09 09:19
  /u01/app/oracle/oradata/orcl11/redo01.log  * Initialized *   2012-11-08 16:15
  /u01/app/oracle/oradata/orcl11/redo01.log  2012-11-08 15:03  2012-11-08 16:07
  /u01/app/oracle/oradata/orcl11/redo01.log  2012-11-08 11:22  2012-11-08 15:03
  /u01/app/oracle/oradata/orcl11/redo03.log  2012-11-08 11:06  2012-11-08 11:22
  /u01/app/oracle/oradata/orcl11/redo03.log  * Initialized *   2012-11-08 11:06
  /u01/app/oracle/oradata/orcl11/redo03.log  2012-11-07 17:14  2012-11-08 10:21
  /u01/app/oracle/oradata/orcl11/redo03.log  * Initialized *   2012-11-07 17:14
  /u01/app/oracle/oradata/orcl11/redo03.log  2012-11-07 13:40  2012-11-07 17:09
  /u01/app/oracle/oradata/orcl11/redo03.log  * Initialized *   2012-11-07 13:40
  /u01/app/oracle/oradata/orcl11/redo03.log  2012-11-07 13:05  2012-11-07 13:35
  Not Available                           * Initialized *   2012-11-07 13:05

Current directory    /u01/app/gg

Report file          /u01/app/gg/dirrpt/LEMP1.rpt
Parameter file       /u01/app/gg/dirprm/lemp1.prm
Checkpoint file      /u01/app/gg/dirchk/LEMP1.cpe
Process file         /u01/app/gg/dirpcs/LEMP1.pce
Stdout file          /u01/app/gg/dirout/LEMP1.out
Error log            /u01/app/gg/ggserr.log

Also, we can use command send lemp1 status to get familiar information about the current status of Extract lemp1.

GGSCI (cora) 17> send lemp1 status

Sending STATUS request to EXTRACT LEMP1 ...

EXTRACT LEMP1 (PID 5696)
  Current status: Recovery complete: At EOF

  Current read position:
  Redo thread #: 1
  Sequence #: 28
  RBA: 22324736
  Timestamp: 2012-11-26 10:29:28.000000
  SCN: 0.1391293
  Current write position:
  Sequence #: 18
  RBA: 1034
  Timestamp: 2012-11-26 10:30:13.307645
  Extract Trail: /u01/app/gg/dirdat/l1


Monitoring process volume
1. stats lemp1
Statistics for operations processed: lists all the tables that have transactions.
该命令主要用于显示某进程组自启动以来所处理的所有事务的统计信息，如在哪个schema下对哪张表做了哪些操作，该操作以统计信息的方式给出。
在单方向的数据复制过程中，一对相关联的Extract和Replicat进程组处理的事务信息要完全一致，如经过对lemp1分析可知，自进程启动以来对Scott下的sal表进行了5次的插入操作，在target一端的remp1分析，应该有完全一致的处理信息。示例如下：

GGSCI (cora) 2> stats lemp1 --source

Sending STATS request to EXTRACT LEMP1 ...

Start of Statistics at 2012-11-26 10:39:42.

DDL replication statistics (for all trails):

*** Total statistics since extract started     ***
        Operations                                         0.00
        Mapped operations                                  0.00
        Unmapped operations                                0.00
        Other operations                                   0.00
        Excluded operations                                0.00

Output to /u01/app/gg/dirdat/l1:

Extracting from SCOTT.SAL to SCOTT.SAL:

*** Total statistics since 2012-11-26 10:39:20 ***
        Total inserts                                      5.00
        Total updates                                      0.00
        Total deletes                                      0.00
        Total discards                                     0.00
        Total operations                                   5.00

*** Daily statistics since 2012-11-26 10:39:20 ***
        Total inserts                                      5.00
        Total updates                                      0.00
        Total deletes                                      0.00
        Total discards                                     0.00
        Total operations                                   5.00

*** Hourly statistics since 2012-11-26 10:39:20 ***
        Total inserts                                      5.00
        Total updates                                      0.00
        Total deletes                                      0.00
        Total discards                                     0.00
        Total operations                                   5.00

*** Latest statistics since 2012-11-26 10:39:20 ***
        Total inserts                                      5.00
        Total updates                                      0.00
        Total deletes                                      0.00
        Total discards                                     0.00
        Total operations                                   5.00

End of Statistics.


GGSCI (cora) 1> stats remp1 --target

Sending STATS request to REPLICAT REMP1 ...

Start of Statistics at 2012-11-26 10:54:44.

DDL replication statistics:

*** Total statistics since replicat started     ***
        Operations                                         0.00
        Mapped operations                                  0.00
        Unmapped operations                                0.00
        Other operations                                   0.00
        Excluded operations                                0.00
        Errors                                             0.00
        Retried errors                                     0.00
        Discarded errors                                   0.00
        Ignored errors                                     0.00

Replicating from SCOTT.SAL to SCOTT.SAL:

*** Total statistics since 2012-11-26 10:39:27 ***
        Total inserts                                      5.00
        Total updates                                      0.00
        Total deletes                                      0.00
        Total discards                                     0.00
        Total operations                                   5.00

*** Daily statistics since 2012-11-26 10:39:27 ***
        Total inserts                                      5.00
        Total updates                                      0.00
        Total deletes                                      0.00
        Total discards                                     0.00
        Total operations                                   5.00

*** Hourly statistics since 2012-11-26 10:39:27 ***
        Total inserts                                      5.00
        Total updates                                      0.00
        Total deletes                                      0.00
        Total discards                                     0.00
        Total operations                                   5.00

*** Latest statistics since 2012-11-26 10:39:27 ***
        Total inserts                                      5.00
        Total updates                                      0.00
        Total deletes                                      0.00
        Total discards                                     0.00
        Total operations                                   5.00

End of Statistics.


Monitoring lag
1. lag lemp1
     or
    send lemp1 getlag
Lag statistics show you how well the Oracle GoldenGate processes are keeping pace with the amount of data that is being generated by the business applications.

GGSCI (cora) 9> send lemp1 getlag

Sending GETLAG request to EXTRACT LEMP1 ...
Last record lag: 22 seconds.
At EOF, no more records to process.

You get one of the three statuses:

  1. ‘At EOF, no more records to process’
  2. ‘Waiting for data to process’ 
  3. ‘Processing data’ 
NOTE: The INFO command also returns a lag statistic, but this statistic is taken from the 
last record that was checkpointed, not the current record that is being processed. 
It is less accurate than LAG or INFO.


Using the error log
1. view ggsevt
Use the Oracle GoldenGate error log to view:
  1. a history of GGSCI commands
  2. Oracle GoldenGate processes that started and stopped
  3. processing that was performed
  4. errors that occurred
  5. informational and warning messages

Using the process report
1. view report lemp1
Use the process report to view (depending on the process):
  1. parameters in use
  2. table and column mapping
  3. database information
  4. runtime messages and errors
  5. runtime statistics for the number of operations processed

Using the discard file
1. view report
Use a discard file to capture information about Oracle GoldenGate operations that failed.The discard file reports such information as:
  1. The database error message
  2. The sequence number of the data source or trail file
  3. The relative byte address of the record in the data source or trail file
  4. The details of the discarded operation, such as column values of a DML statement or the text of a DDL statement

Using the system log

fj.pngPicture2.jpg

来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/26679417/viewspace-749952/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/26679417/viewspace-749952/

clhg24766
关注
GoldenGate
08-01
**Oracle GoldenGate详解** Oracle GoldenGate是一款高效、可靠的数据复制软件，主要用于实现企业级的数据集成、数据保护和灾难恢复。它能够实现实时的数据复制，确保数据的一致性和完整性，广泛应用于分布式数据库...
GoldenGate installation
09-21
### Oracle GoldenGate 安装与配置指南 #### 一、概述 Oracle GoldenGate 是一款业界领先的数据集成解决方案，能够实现在异构系统间的数据复制、转换及整合等功能。本指南基于 Oracle GoldenGate 11g Release 1 ...
IEEE802.3ah协议学习（3）——MPCP多点控制协议
学习，思考，记录，分享。
06-07 9416
本博客（http://blog.csdn.net/livelylittlefish）贴出作者（三二一、小鱼）相关研究、学习内容所做的笔记，欢迎广大朋友指正！ http://www.ieee802.org/21/doctree/2006_Meeting_Docs/2006-11_meeting_docs/802.3ah-2004.pdf 64.3 Multi-Point Cont
【ogg Administering Oracle GoldenGate】17 Monitoring Oracle GoldenGate Processing
viviliving的专栏
11-20 332
17Monitoring Oracle GoldenGate Processing This chapter describes the monitoring of Oracle GoldenGate processing. Topics: 17.1Using the Information Commands in GGSCI The primary way to view p...
oracle goldengate学习笔记,【学习笔记】Oracle goldengate monitor使用笔记
weixin_36236141的博客
04-05 575
天萃荷净Oracle研究中心学习笔记：分享一篇关于Oracle数据库goldengate monitor的使用笔记。本站文章除注明转载外，均为本站原创： 转载自love wife & love life —Roger 的Oracle技术博客本文链接地址: Goldengate monitor v11.1 –How to Use1. 如何启停monitor serOracleoraclepl...
1.Oracle GoldenGate概述
weixin_42005129的博客
02-26 1142
接触OGG也有好几年的时间了。OGG适用的异构、同构实时数据同步很多，不过目前在生产实践中只有用到Mysql 实时同步至ORACLE。所以对于其他的同步案例很少用到，关于OGG的知识点也是用到的才比较熟悉，很少用到的知识和一些关键名词也是比较陌生。趁着现在有时间，想全面的学习下。就记录下来。本文学习记录，官网入口这几个问题都是比较概念、概括性。如果有感兴趣的网友，可以自己阅读官网。下文就选OGG相关产品介绍下。其他的不记录于此。
【ogg Administering Oracle GoldenGate】14 Handling Processing Errors
viviliving的专栏
11-19 229
14Handling Processing Errors 本章描述如何配置Oracle GoldenGate进程来处理错误。 Oracle GoldenGate通过其监视和报告工具以多种方式报告处理错误。有关这些工具的更多信息 seeMonitoring Oracle GoldenGate Processing. Topics: 14.1Overview of Oracle G...
GoldenGate日常监控
weixin_30369041的博客
05-07 85
Information on all GoldenGate processes running on a system GGSCI (devu007) 21> info all Program Status Group Lag Time Since Chkpt MANAGER RUNNING EXTRACT ...
【ogg Administering Oracle GoldenGate】4 Getting Started with the Oracle GoldenGate Process Interfaces
viviliving的专栏
11-18 722
4Getting Started with the Oracle GoldenGate Process Interfaces 本章描述了Oracle GoldenGate用户如何通过GGSCI (Oracle GoldenGate Software Command Interface)、批处理和shell脚本以及参数文件向进程提供指令。 Topics: 4.1Using the ...
【跟我学ogg12.3.0.1】第二节【Oracle GoldenGate之Oracle篇】14 实例化Oracle GoldenGate复制（SOURCEISTABLE直接初始化方便了很多）
viviliving的专栏
11-07 933
本章包含配置和执行复制环境实例化的说明，以在两个或多个数据库之间建立和维护同步状态。在同步状态下，源和目标对象包含相同的或适当对应的值，这取决于在将数据应用于目标对象之前是否对数据执行了任何转换或转换。 Topics: Overview of the Instantiation Process在实例化过程中，复制源数据并将副本加载到目标数据库。 Prerequisites for Insta...
Streaming data from Oracle using Oracle GoldenGate and Kafka Connect
weixin_38166789的博客
11-06 167
This is a guest blog from Robin Moffatt.Robin Moffatt is Head of R&D (Europe) at Rittman Mead, and an Oracle ACE. His particular interests are analytics, systems architecture, administratio...
Oracle goldengate 从入门到精通 15课.rar
07-02
OracleGoldengate从入门到精通 Agenda  Goldengate是什么？  Goldengate适用的场景  Goldengate基本原理  Goldengate复制拓扑和异构  Goldengate产品线介绍  Goldengate产品的下载  快速的搭建一个...
goldengate视频和文档.txt
01-21
《GoldenGate从入门到精通的学习指南》 一、GoldenGate简介 GoldenGate是Oracle公司推出的一款数据复制软件，主要用于在不同平台之间进行实时的数据复制。它可以在多种操作系统和数据库之间进行数据复制，如Windows...
GoldenGate19.1微服务Microservices的安装和配置-最新版本.docx
08-04
Oracle GoldenGate 19.1 是一款用于实时数据复制和数据集成的工具，它引入了微服务架构，使得组件更加模块化，便于管理和扩展。在本文档中，我们将详细探讨如何在最新的19.1版本中安装和配置GoldenGate的微服务。 1...
Mybatis
最新发布
庸不易的博客
11-15 792
1、定义不同：#{} 预处理：而 ${} 是直接替换2、使用不同：#{} 适用于所有类型的参数匹配；但 ${} 只适用于数值类型。3、安全性不同：#{} 性能高，并且没有安全问题；但 $ {} 存在 SQL 注入的安全问题。4、使用场景不同：当传递的是一个 SQL 关键字 的时候，只能 使用 ${}。当传递的是一个字段，总之，就是需要获取到参数类型 与 内容，只能使用 #{}。（PS：数字类型，#{} 和 ${} 都是可以使用的！5、 ${} 不能用于 模糊匹配查询；
MySQL 8.0特性-自增变量的持久化
myneth的博客
11-13 542
在MySQL 8.0之前，自增主键AUTO_INCREMENT的值如果大于max(primary key)+1，在MySQL重启后，会重置AUTO_INCREMENT=max(primary key)+1，这种现象在某些情况下会导致业务主键冲突或者其他难以发现的问题。下面通过案例来对比不同的版本中自增变量是否持久化。
约束（MYSQL）
2301_80363309的博客
11-13 322
not null（非空） unique（唯一） default（默认约束，规定值） 主键约束primary key（非空且唯一） auto_increment（自增类型） 复合主键 check（保证列中值符合指定条件） foreign key（外键约束）
labview中连接sql server数据库查询语句
weixin_70653117的博客
11-13 392
日常记录
gbase8s数据库常见的连接算法
wangyx01的博客
11-13 220
外表指针指向第一条数据，内表指针顺序移动，找到和外表匹配项，记录，内表循环结束后外边指针继续向下移动，一直到外表循环结束为止。hash 连接中只有极少量的随机读，大部分都为顺序读，极大缓解了大量随机读的压力。有则取捅中进行匹配（若捅中有多条数据则发生hash碰撞），没有则继续匹配下一。hash 连接避免了嵌套循环的大量的随机读，简单伪代码如下。在gbase8s 中 ，常见的连接算法主要分为如下几种。细分可分为索引嵌套循环，块嵌套循环，半嵌套循环等。嵌套循环的缺点，在大量数据下会发生大量的随机读。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值