平台数据库授权时造成主从同步失败问题的事故报告20120705

 

今天晚上19:00，在对主库做账号（比如select_user）查询授权后，发现dbname_company_register 表包含password敏感字段，故在主库上删掉对该用户授权进行重新授权时，因主库使用过use dbname命令，而从库不存在select_user用户，导致SQL线程死掉，造成主从不同步 

以下是关于此次故障的详细报告：

 

一、故障时间：2012-7-5 19:00 到 2012-7-5 19:16  共16分钟

二、故障现象：用户无法正常操作，但不会造成数据丢失

三、故障等级：严重

四、故障操作人：XXX

五、故障原因：在主库对不合理授权用户删除时，因从库不存在该用户，导致SQL线程死掉，主从不同步

六、关联原因：在内网没有仔细检查授权是否合适，没有发现dbname_company_register 表包含password敏感字段

七、从库错误log：Last_Error: Error 'Operation DROP USER failed for 'select_user'@'%'' on query. Default database: