最近,一套MySQL数据库服务器周期性的在业务高峰期出现CPU使用率百分百。
问题现象:
MySQL数据库服务器周期性的CPU使用率百分百
问题分析:
1、服务器配置:8核的CPU、内存为32G
2、业务变更:经了解有新的业务模块上线
3、数据库锁排查:通过show full processlist观察只有insert语句insert into values()()()()()
4、监控查看:监控均是上午业务高峰期CPU出现间歇性的满载,但是,同一时间段的数据库服务器的IO却不高
5、日志信息查看:查看操作系统日志和mysql数据库日志,没有任何错误或者警告信息提示
6、数据库BUG排查:社区查了下倒是有可能是MySQL5.6/5.7的BUG#77827
reduce cpu time costs of creating dummy index while change buffer is enabled。顺着BUG#77827的提示看了下相关业务表的索引,居然有7个之多,但是并不是BUG#77827本身引起的。
小结:到此,可以确定是表上的索引过多,导致insert批量插入,索引维护成本过高引起CPU满载。
问题处理:
与业务沟通,删除使用率较低的索引,业务处理时效大大缩短,CPU平稳不超过20%。