记一次mysql cpu 异常升高100%问题排查

此服务器为一个从库,用于数据的导出业务,服务器配置较低,日常的慢sql也比较多。

上午11点左右cpu异常告警,如下图所示,

cpu使用率突增到50%,下午2点左右突增到100% ,登录服务器top命令查看cpu升高的服务为mysql,如下图

首先怀疑是慢sql造成的cpu升高,登录mysql,

SELECT * FROM information_schema.processlist 
WHERE COMMAND<>'Sleep' AND TIME >5 AND info IS NOT NULL;

多次捕捉进程信息,没有内容,

查看慢sql监控,慢sql没有告警,慢sql的阈值为2s,慢sql数量与日常无异,查看slow.log中的慢sql,为日常业务统计sql,执行时间都在5s以内,没有新增的慢sql,

慢sql统计 

又查看连接数、QPS均无异常,

连接数 

QPS 

 排查陷入僵局,查看sniffer-agent的审计内容,

 发现有个sql在2分钟内执行了7000+次,每次执行时间300ms,至此找到原因,联系对应开发人员确认,他在开多线程下载数据,cpu为8核,他开了8线程,导致cpu 100%。

没有安装审计功能,无法查看具体sql的可以在cpu升高时打开general_log,

set global general log=on;

分析具体sql,

QPS没有异常升高,怀疑是因为mysql.statsvp.Questions监控获j取时间为1m,被稀释了,待研究。

  • 0
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

LOST_9

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值