CRS磁盘force dismount引起的RAC节点宕机故障

墨墨导读：本文来自墨天轮“猫瞳映月”投稿，作者主页https://www.modb.pro/u/12330，主要详述CRS磁盘force dismount引起的RAC节点宕机故障处理过程。

数据技术嘉年华，十周年盛大开启，点我立即报名！大会以“自研·智能·新基建——云和数据促创新 生态融合新十年” 为主题，相邀数据英雄，总结过往十年历程与成绩，展望未来十年趋势与目标！近60场演讲，大咖云集，李飞飞、苏光牛、林晓斌、黄东旭...，快来pick你喜欢的嘉宾主题吧！

问题描述

1、环境介绍

Oracle RAC 11.2.0.4.0
RedHat Linux 6.9

2、告警信息

巡检的时候执行如下命令不成功

$ crsctl stat res -t
CRS-0184: Cannot communicate with the CRS daemon.

3、检查CRS状态

$ crsctl check cluster
CRS-4535: Cannot communicate with Cluster Ready Services
CRS-4529: Cluster Synchronization Services is online
CRS-4533: Event Manager is online

4、启动CRS服务

[root@node1 ~]# /app/grid/bin/crsctl start crs
CRS-4640: Oracle High Availability Services is already active
CRS-4000: Command Start failed, or completed with errors.

启动失败。