生产环境数据库服务器存储文件系统故障,导致数据库异常宕机,相关人员盲目重启数据库服务器OS后,存储无法正常挂载,现象如下:
查看OS message信息如下:
可知OS 文件系统出现了bad superblock on /dev/sdb1.
查看OS重启时间:
从4月20日前后至5月7日OS日志中一直报错如下:
5月7日出现磁盘I/O error on device /dev/sdb1,此时数据库无法访问
在不明确原因的情况下,盲目重启生产系统纯属“作死的节奏”。务必安排专业人士解决专业的问题。
推断此问题是长时间积累的结果,此种问题可以采用linux 的fsck尝试修复,但风险极大;可能修复后文件系统正常,但存储中的文件丢失。务必慎重!!!
另外,务必做好数据库的备份(存放于非数据文件所在的存储空间)及异地的灾备,确保数据的安全及可恢复!备份终于一切!