oracle rac蓝屏崩溃,最常见的5个导致 RAC 实例崩溃的问题

LMS进程跟踪文件显示:

2011-07-05 10:53:44.218905 : Start affinity expansion for pkey 81885.0

2011-07-05 10:53:44.498923 : Expand failed: pkey 81885.0, 229 shadows traversed, 153 replayed 1 retries

2. PMON (ospid: 4915562): terminating the instance due to error 481

Sat Oct 01 19:21:37 2011

System state dump requested by (instance=2, osid=4915562 (PMON)), summary=[abnormal instance termination].

可能的原因：

1. Bug 11875294 LMS gets stuck during DRM, Instance crashed with ORA-481

2. HAIP 在部分集群节点上离线，或者 HAIP 在所有集群节点上都在线，但是无法通过其进行通信，例如ping操作失败。

解决方案：

1. Bug 11875294 已在 11.2.0.3 中得到修正，绕过问题的方法是：

通过设置

_gc_read_mostly_locking=FALSE 来禁用read  mostly。

问题 3：ORA-600[kjbmprlst:shadow]、ORA-600[kjbrref:pkey]、ORA-600[kjbmocvt:rid]、[kjbclose_remaster:!drm]、ORA-600 [kjbrasr:pkey] 导致的实例崩溃

症状：

由于 ORA-600 [kjbmprlst:shadow]、ORA-600[kjbrref:pkey]、ORA-600[kjbmocvt:rid]、[kjbclose_remaster:!drm] 或 ORA-600 [kjbrasr:pkey] 导致 RAC 实例崩溃

可能的原因：

这一组 ORA-600 与 DRM(dynamic resource remastering)消息或 read mostly 锁有关。涉及多个 bug，包括：

Document 9458781.8 Missing close message to master leaves closed lock dangling crashing the instance with assorted Internal error

Document 9835264.8 ORA-600 [kjbrasr:pkey] / ORA-600 [kjbmocvt:rid] in RAC with dynamic remastering

Document 10200390.8 ORA-600[kjbclose_remaster:!drm] in RAC with fix for 9979039

Document 10121589.8 ORA-600 [kjbmprlst:shadow] can occur in RAC

Document 11785390.8 Stack corruption / incorrect behaviour possible in RAC

Document 12408350.8 ORA-600 [kjbrasr:pkey] in RAC with read mostly locking

Document 12834027.8 ORA-600 [kjbmprlst:shadow] / ORA-600 [kjbrasr:pkey] with RAC read mostly locking

解决方案：

上述大部分 bug 都在 11.2.0.3 中得到了修正，安装 11.2.0.3 补丁集应该可以避免这些 bug，除了 Bug 12834027，此 bug 将在 12.1 中进行修正。绕过这个 bug 的方法是：

禁用 DRM

或

禁用read mostly

例如：设置 "_gc_read_mostly_locking"=FALSE

问题 4：启用flash cache后产生kcldle/kclfplz/kcbbxsv_l2/kclfprm，导致实例崩溃

症状：

警报日志中报告了 ORA-7445[kcldle]

ORA-7445[kclfplz]

ORA-7445[kcbbxsv_12]

ORA-744[kclfprm]

可能的原因：

它们是由不同的 bug 引起的，而这些bug都归结为 基础bug Bug 12337941 Dumps on kcldle / kclfplz / kcbbxsv_l2 / kclfprm using flash

解决方案：

此 bug 已在 11.2.0.3 中得到修正，请安装补丁集或使用以下方法绕过这个问题：禁用 Flash Cache

问题 5：LMS 报 ORA-600 [kclpdc_21]错误，实例崩溃

症状：

警报日志中报告了 ORA-600[kclpdc_21]

可能的原因：

Document 10040035.8  LMS gets ORA-600 [kclpdc_21] and instance crashes

解决方案：

此 bug 已在 11.2.0.3 中得到修正