Dear All,
今天收到吉林项目发过来的请求,在预上线系统部署应用系统连接ORACLE RAC 服务器,刚开始连接是正常的,慢慢的应用层业务响应非常慢,应用日志报大量连接超时,接到发来请求后,着手分析,现场的兄弟都急着一会一过电话,离上线的日子很近了!压力山大!
1:通过邮件让现场运维的兄弟把相关日志、应用程序日志、连接方式、整个应用的部署架构方案发回来,组织会议
2:让广电局方提供VPN临时帐号,登录后分析数据库性能、分析ADDM、分析AWR,看看程序是否存在阻塞及锁资源--当时系统并不繁忙各项vmstat、iostat、cpu使用率、内存使用都是正常的,很空间
3:跑完了ADDM、AWR、ASH三大报告后,进行分析发现:AWR报告出现TO5等待事件是gc current block lost
gc current block lost、gc cr block lost 的平均等待在500多毫秒左右--初步判断问题出在这里。
查找MOS RAC 环境中 gc block lost 和私网通信性能问题的诊断 (文档 ID 1674865.1)
原文如下:
RAC 环境中 gc block lost 和私网通信性能问题的诊断 (文档 ID 1674865.1)