Oracle 11.2.0.4 + rhel 6.5 x64一个神奇的问题

1、集群状态

（应该使用grid$ crsctl stat res -t，因看起来比较直观，临时使用如下命令）

[grid@rac1 rac1]$ crs_stat -t

Name           Type           Target    State     Host        

------------------------------------------------------------

ora.CRS.dg     ora....up.type ONLINE    ONLINE    rac1        

ora.DATA.dg    ora....up.type ONLINE    ONLINE    rac1        

ora.FRA.dg     ora....up.type ONLINE    ONLINE    rac1        

ora....ER.lsnr ora....er.type ONLINE    ONLINE    rac1        

ora....N1.lsnr ora....er.type ONLINE    ONLINE    rac1        

ora.asm        ora.asm.type   ONLINE    ONLINE    rac1        

ora.cvu        ora.cvu.type   ONLINE    ONLINE    rac1        

ora.gsd        ora.gsd.type   OFFLINE   OFFLINE               

ora....network ora....rk.type ONLINE    ONLINE    rac1        

ora.oc4j       ora.oc4j.type  ONLINE    ONLINE    rac1        

ora.ons        ora.ons.type   ONLINE    ONLINE    rac1        

ora.orcl.db    ora....se.type ONLINE    ONLINE    rac1        

ora....SM1.asm application    ONLINE    ONLINE    rac1        

ora....C1.lsnr application    ONLINE    ONLINE    rac1        

ora.rac1.gsd   application    OFFLINE   OFFLINE               

ora.rac1.ons   application    ONLINE    ONLINE    rac1        

ora.rac1.vip   ora....t1.type ONLINE    ONLINE    rac1        

ora.rac2.vip   ora....t1.type ONLINE    ONLINE    rac1        

ora....ry.acfs ora....fs.type ONLINE    ONLINE    rac1        

ora.scan1.vip  ora....ip.type ONLINE    ONLINE    rac1        

2、votedisk /dev/raw/raw3 被误dd操作，结果OFFLINE

ASMCA无法看到ASM磁盘组信息：

3、此时查看v$asm_disk报错如下

SQL> show parameter inst

NAME                                 TYPE        VALUE
------------------------------------ ----------- ------------------------------
cluster_database_instances           integer     4
instance_name                        string      +ASM1
instance_number                      integer     1
instance_type                        string      asm

SQL> select PATH from v$asm_disk;
select PATH from v$asm_disk
                 *
ERROR at line 1:
ORA-00600: internal error code, arguments: [kfdskResolveDisk1], [], [], [], [],
[], [], [], [], [], [], []
查询MOS无解：

4、启动数据库报错如下，查询MOS无解

SQL> startup   

ORACLE instance started.

Total System Global Area 1252663296 bytes

Fixed Size                  2252824 bytes

Variable Size             452988904 bytes

Database Buffers          788529152 bytes

Redo Buffers                8892416 bytes

Database mounted.

ORA-01122: database file 1 failed verification check

ORA-01110: data file 1: '+DATA/orcl/datafile/system.256.906535601'

ORA-01200: actual file size of 94720 is smaller than correct size of 97280

blocks

此次故障暂时无解。。。