关键字：心跳网络、oracle rac 网络异常宕机、packet reassembles failed 、UDP error 转载大佬的一篇文章..._[cssd(16874)]crs-1662:member kill requested by nod-CSDN博客

本文链接：https://blog.csdn.net/D_johnie/article/details/109127970

本文探讨了一起Oracle RAC数据库节点因网络通信异常导致的宕机问题，重点是IP packet reassembles failed和UDP错误。通过分析，发现是由于Linux 6.6的内核问题，导致IP包重组失败，解决方案包括调整内核参数和检查网络负载。此问题在更新后的Linux版本中已得到修复。

摘要由CSDN通过智能技术生成

同一个数据库，同一次故障，两个人出据的数据库故障报告深度截然不同，很难受。

我要是早看到就不会多次发生这个问题了，不完全一致但解决排查思路是一致的，关键字：心跳网络、oracle rac 、网络异常宕机、packet reassembles failed 、UDP error

转载自 https://www.anbob.com/archives/2851.html

以下为原文：

前几日和好友赵彬同学交流在ANBOB公众号投稿分享了一个案例，数据库第二个节点被驱逐出集群，并且多次自动重启以失败告终，驱逐原因在GI Alert log显示是私网通信丢失，而重启失败也是因为ASM无法启动，ASM db alert显示IPC Send timeout. 当时ping和tracert并没发现什么异常，从OSW中的netstat -s查看IP packet reassembles failed时间段值大量增长，这是一套oracle 11.2.0.4 2Nodes RAC on RHEL 6.6的环境，另个每个数据库服务器CPU核数过百，这个案例有多种巧合,如果CPU只有几个，问题也可能不会发生，如果是RHEL7也不会发生等等。当然最终以调速OS参数解决，但是原因更值得分析。

Node1 GI ALERT LOG

2017-03-02 11:46:26.607: 
[/u01/11.2.0/grid/bin/oraagent.bin(121496)]CRS-5011:Check of resource "testdb" failed: details at "(:CLSN00007:)" in "/u01/11.2.0/grid/log/anbob/agent/crsd/oraagent_oracle//oraagent_oracle.log"
2017-03-02 11:46:26.612: 
[crsd(175117)]CRS-2765:Resource 'ora.testdb.db' has failed on server 'anbob'.
2017-03-02 11:46:42.866: 
[cssd(172139)]CRS-1612:Ne