Oralce GoldenGate故障处理-主机重启导致OGG pump进程传输tail文件异常

最新推荐文章于 2024-05-15 17:12:26 发布
最新推荐文章于 2024-05-15 17:12:26 发布
阅读量1.1k 收藏
点赞数
分类专栏： Goldgate管理与应用 文章标签： 数据库 服务器 linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/oradbm/article/details/129088841
版权

1 故障描述

内存异常，XCF报警导致数据库主机宕机 。

2 故障恢复

  2.1 REPORT 日志分析

将数据库主机起来之后，数据库可以  正常启动，OGG进程也是都起来了，但是过一段时间后，pump传输进程abend。

使用view report pump1日志如下：

源端错误信息就是一致刷
2023-02-17 15:00:21  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809.

2023-02-17 15:00:31  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809.

2023-02-17 15:00:41  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809.

2023-02-17 15:00:51  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809.
2023-02-17 15:00:21  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809.

2023-02-17 15:00:31  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809.

2023-02-17 15:00:41  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809

过一段时间后abend。

目标MGR rpport信息如下：

类似信息一直刷新 。

2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51344 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).

2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51345 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).
2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51344 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).

2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51345 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).
2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51344 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).

2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51345 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).
2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51344 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).

2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51345 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).
2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51344 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).

2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51345 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).
2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51344 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).

2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51345 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).

 此时看信息就觉得是7809 连接 有问题，于是是看

netstat -a|grep 7809 

发现端口正常进行监听。就是连接不上 ，奇怪纳闷了。

  2.2 GGSERR.LOG分析

从目标端的err日志发现如下信息：

目标端报错时错误信息error log信息

2023-02-17 14:46:51  INFO    OGG-01677  Oracle GoldenGate Collector for Oracle:  Waiting for connection (started dynamically).
2023-02-17 14:46:51  ERROR   OGG-00303  Oracle GoldenGate Collector for Oracle:  TCP/IP bind error 125 (Address already in use). 我们开始未发现这个error，是 所有ogg进程重启 在重启间接解决的
2023-02-17 14:46:51  ERROR   OGG-01668  Oracle GoldenGate Collector for Oracle:  PROCESS ABENDING.
2023-02-17 14:46:51  INFO    OGG-01677  Oracle GoldenGate Collector for Oracle:  Waiting for connection (started dynamically).
2023-02-17 14:46:51  ERROR   OGG-00303  Oracle GoldenGate Collector for Oracle:  TCP/IP bind error 125 (Address already in use).
2023-02-17 14:46:51  ERROR   OGG-01668  Oracle GoldenGate Collector for Oracle:  PROCESS ABENDING.

2.3 正确日志汇总

源端pump

正确日志刷到一定程度建立其他端口连接

2023-02-17 15:00:51  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809.

2023-02-17 15:00:21  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809.

2023-02-17 15:00:31  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809.

2023-02-17 15:00:41  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809.

2023-02-17 15:00:51  WARNING OGG-01223  TCP/IP error 79 (Connection refused), endpoint: 192.168.248.92:7809.

2023-02-17 15:01:06  INFO    OGG-01226  Socket buffer size set to 27985 (flush size 27985).

2023-02-17 15:01:06  INFO    OGG-01230  Recovered from TCP error, host 192.168.248.92, port 7840.

2023-02-17 15:01:09  INFO    OGG-01056  Recovery initialization completed for target file ./dirdat/mo041446, at RBA 145191066, CSN 13091982261579.

2023-02-17 15:01:09  INFO    OGG-01478  Output file ./dirdat/mo is using format RELEASE 11.2.
 


目标端正常时错误信息error log信息

2023-02-17 15:01:01  INFO    OGG-00963  Oracle GoldenGate Manager for Oracle, mgr.prm:  Command received from EXTRACT on host [192.168.243.29]:51344 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).
2023-02-17 15:01:01  INFO    OGG-00963  Oracle GoldenGate Manager for Oracle, mgr.prm:  Command received from EXTRACT on host [192.168.243.29]:51345 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).
2023-02-17 15:01:01  INFO    OGG-01677  Oracle GoldenGate Collector for Oracle:  Waiting for connection (started dynamically).
2023-02-17 15:01:01  INFO    OGG-00963  Oracle GoldenGate Manager for Oracle, mgr.prm:  Command received from SERVER on host [127.0.0.1]:33045 (REPORT 14418 7840).
2023-02-17 15:01:01  INFO    OGG-00974  Oracle GoldenGate Manager for Oracle, mgr.prm:  Manager started collector process (Port 7840).
2023-02-17 15:01:01  INFO    OGG-01228  Oracle GoldenGate Collector for Oracle:  Timeout in 300 seconds.
2023-02-17 15:01:01  INFO    OGG-01677  Oracle GoldenGate Collector for Oracle:  Waiting for connection (started dynamically).
2023-02-17 15:01:01  INFO    OGG-00963  Oracle GoldenGate Manager for Oracle, mgr.prm:  Command received from SERVER on host [127.0.0.1]:33046 (REPORT 14419 7841).
2023-02-17 15:01:01  INFO    OGG-00974  Oracle GoldenGate Manager for Oracle, mgr.prm:  Manager started collector process (Port 7841).
2023-02-17 15:01:01  INFO    OGG-01228  Oracle GoldenGate Collector for Oracle:  Timeout in 300 seconds.
2023-02-17 15:01:04  INFO    OGG-00987  Oracle GoldenGate Command Interpreter for Oracle:  GGSCI command (eoms): start er *.

mgr report 正确日志


2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51344 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).

2023-02-17 15:01:01  INFO    OGG-00963  Command received from EXTRACT on host [192.168.243.29]:51345 (START SERVER CPU -1 PRI -1  TIMEOUT 300 PARAMS ).

2023-02-17 15:01:01  INFO    OGG-00963  Command received from SERVER on host [127.0.0.1]:33045 (REPORT 14418 7840).

2023-02-17 15:01:01  INFO    OGG-00974  Manager started collector process (Port 7840).

2023-02-17 15:01:01  INFO    OGG-00963  Command received from SERVER on host [127.0.0.1]:33046 (REPORT 14419 7841).

2023-02-17 15:01:01  INFO    OGG-00974  Manager started collector process (Port 7841).

3 故障总结

分析report日志的同时也需要查看ggserr.log进行分析，片面了。MD

执笔画情ora
关注
专栏目录
oracle19c双机运维,Oracle 19C OGG基础运维-05DDL操作同步
weixin_39663970的博客
04-12 493
Oracle 19C OGG基础运维-05DDL操作同步一 源端和目标端：停止同步进程二 源端：修改抽取进程ext_01三 目标端：修改应用进程rep_0l四 启动进程五 DDL操作同步测试六 查看日志七 常见问题一 源端和目标端：停止同步进程源端：stop pump_01stop ext_01stop mgr目标端：stop rep_01stop mgr二 源端：修改抽取进程ext_01红色部分...
oracle ogg 全量 增量,1.利用ogg实现oracle到kafka的增量数据实时同步.md
weixin_34666478的博客
04-02 1419
## 利用ogg实现oracle到kafka的增量数据实时同步#### 前言> ogg即Oracle GoldenGate是Oracle的同步工具，本文讲如何配置ogg以实现Oracle数据库增量数据实时同步到kafka中，其中同步消息格式为json。下面是源端和目标端的一些配置信息：| -- | 版本 | OGG版本 | IP | 别...
OGG常用问题解决手段
01-16
ogg常用问题解决方法输出，ogg运维三年沉淀出来的干货
OGG常见问题处理
weixin_33806509的博客
03-16 527
1403： ORA-01403: No data found 在运行PL/SQL块、存储过程、函数、触发器等，假设须要进行操作的记录没有查询到。则会返回1403的错误 Goldengate中的1403 在目标段复制进程中，godengate从日志中解析出sql语句，依据sql语句的where条件。在目标段的库中匹配不出对应的记录 1403错误原因: 1. 附...
oracle ogg重启,ORACLERAC重启使OGG故障处理
weixin_26976635的博客
04-03 496
日志错误报告2018-04-16 23:15:16INFOOGG-01026Oracle GoldenGate Capture for Oracle,ext-all.prm:Rolling over remote file/home/oracle/ogg/dirdat/al001269.2018-04-16 23:15:16INFOOGG-01053Oracle GoldenGate...
OGG 两个故障案例处理
最新发布
shlei5580的专栏
05-15 455
在测试OGG双向同步时，在目标端配置了应用进程，在启动应用进程时发现有报错，打算删除该应用进程，在执行delete REPLICAT rtb删除时报如下错误，导致无法删除。
OGG故障错误处理总结
eagle89的专栏
08-19 8332
第一章GoldenGate错误分析与处理 在维护GoldenGate过程中，由于各种意外情况，难免还是会遇到各种各样的问题。掌握一些常见的GoldenGate故障诊断和错误分析的方法是非常有必要的，而且掌握这些错误分析工具也进一步加深对GoldenGate产品的认识与对GoldenGate原理的理解。 1.1 GoldenGate常见异常处理 GoldenGate运行起来后，随着时间的推移可能会碰到各种各样的问题，下面就来介绍常见的异常现象以及常见的异常处理方法。 1.1.1 异...
Oracle 11g ogg单向数据同步（Oracle 11.2.0.4）
YiChen的博客
07-31 1217
环境描述：
oracle集群安装ogg,RAC环境下配置OGG同步
weixin_36462845的博客
04-08 911
在本文中，介绍了rac环境下配置ogg的单向同步；在配置过程中，2节点的rac数据库做为source端，单实例的数据库作为target端，下面是具体的环境介绍!source端：操作系统版本：rhel5.4 64bit数据库版本：11.2.0.3 64bitogg版本：fbo_ggs_Linux_x64_ora10g_64bit.tarrac数据库名：rac.yang.compublic ip:19...
Oracle 11g goldengate 数据同步流程
飞不雷加思的博客
04-08 2299
Oracle 11g goldengate 数据同步流程1. OGG 19c安装1.1下载链接1.2安装环境1.3 ogg程序安装路径(源端与目标端相同)1.4 将ogg 19c安装包上传至服务器2. 源端数据库相关的设置3. 源端和目标创建相关的表空间及ogg用户3.1 源端和目标端创建ogg用户和表空间3.2目标端创建ogg用户和表空间4. 创建测试用户和表4.1 源端创建测试用户uu及相关表...
OGG-01433故障解决方法
09-11
表压缩设置引起的OGG-01433报错，解决办法，在源库： alter table xxxx nocompress； 然后重启ogg对应进程。 或者那张表要是不重要可忽略，方法如下（此方法不建议，若后期需要这个表再手工导出导入）： edit params 进程名 在最后面添加tableexclude 用户名.表名 保存退出 修改好参数后重启该进程，使修改后的参数文件生效
oracle ogg重启mgr,oracle OGG 三种模式总结
weixin_35249119的博客
04-04 871
配置Ogg(本地模式)(过程可能涉及数据库重启)查看是否是归档模式SQL> archive log list(数据库使用的字符集和系统环境变量$NLS_LANG中要一致才无乱码，SQL> select userenv('language') from dual;查看数据库使用的字符集)关闭数据库SQL> shutdown immediate装载数据库SQL> startup...
OGG extract进程异常生成N多垃圾taril文件
weixin_41637486的博客
02-08 274
adg备库是我的源端extract 进程extract eora_hrsetenv (ORACLE_SID=orcl)setenv (ORACLE_HOME=C:\app\product\11.2.0\dbhome_1)setenv (NLS_LANG=AMERICAN_AMERICA.ZHS16GBK)userid ogg,password oggexttrail E:\ogg\dirdat\h...
linux系统网卡升级 oracle rac重启 及 ogg 重启
马岩的博客
02-27 1361
83服务器 oracle RAC主机，同时是ogg源主机 80服务器 oracle ogg客户端主机，同时是weblogic服务器 停止顺序 1。 停止 83服务器源端上的ogg服务     ./ggsci info all stop EXTB         stop  DPEB 2. 停止80服务器上目的端的ogg服务     ./ggsci info all sto
OGG 手工切换trail文件两种方法
leo__1990的博客
06-13 5111
1. OGG 手工切换trail文件 测试ogg中断之后，重新同步操作https://www.cndba.cn/leo1990/article/2839 OGG 修改 trail 文件大小https://www.cndba.cn/leo1990/article/2856 alter extract pump1 etrollover SEND extract ext1, ROLLOVER ...
ogg不能自动删除trail文件解决一例
bigger王的博客
06-22 2375
问题描述： 巡检的时候发现ogg挂的gg目录使用率85%了，经排查发现是ogg不能自动删除trail文件导致目录使用率告警。 [oracle@host01 ~]$ df -h Filesystem Size Used Avail Use% Mounted on /dev/mapper/ggvg-lv_gg 468G 375G 70G 85% /gg /dev/sda1 194M 33M 152M 18% /boot gg目录...
OGG Data Pump进程
Warrior 技术大杂论
01-09 864
1.Data Pump 是一个配置在源端的辅助的Extract机制； 2.Data Pump 进程的作用是将源端产生的本地trail文件以数据块的形式通过TCP/IP协议发送到目标端，该方式也是推荐的方式； 3.Data Pump 是一个可选组件，本质是extract进程的一种特殊形式，如果不配置 Data Pump，那么由 Extract 主进程将数据发送到目标端的Remote Trail文件中，生成远程trail文件； 4.如果不使用本地trail文件，那么extract进程在抽取完数据以后，直接投递.
OGG 自动重启脚本
weixin_30815427的博客
07-13 882
从朋友那里得来的OGG 重启脚本，感觉很好用，分享给大家。定时任务00 6-20 * * * /oggdata/log/oggautorestart.sh >/oggdata/log/crontab_oggautorestart.log 2>&1[说明] 因为晚上可以有维护操作，我们不希望在维护期间OGG 自动跑起来脚本oggautorestart.sh#!/bin/ba...
OGG pump进程无法启动
tangdj1992的博客
04-15 1167
OGG oracle postgreSQL
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值