linux mysql 死锁进程_一个罕见的MySQL redo死锁问题排查及解决过程

作者:张青林,腾讯云布道师、MySQL架构师,隶属腾讯TEG-基础架构部-CDB内核开发团队,专注于MySQL内核研发&相关架构工作,有着服务多个10W级QPS客户的数据库优化及稳定性维护经验。腾讯云数据库团队:继承腾讯数据库团队十多年海量存储的内部数据库运营和运维经验,推出一系列高性能关系型、分布式、文档型和缓存类数据库产品,并提供高可用性、自动化运维和易维护的云数据库综合解决方案。

问题背景

周一上班,首先向同事了解了一下上周的测试情况,被告知在多实例场景下 MySQL Server hang 住,无法测试下去,原生版本不存在这个问题,而新版本上出现了这个问题,不禁心头一颤,心中不禁感到奇怪,还好现场环境还在,为排查问题提供了一个好的环境,随即便投入到紧张的问题排查过程当中。问题实例表现如下:

并发量为 384 的时候出现的问题;

MySQL 服务器无法执行事务相关的语句,即使简单的 select 语句也无法执行;

所有线程处于等待状态,无法 KILL。

现场环境的收集

首先,通过 pstack 工具获取当前问题实例的堆栈信息以便后面具体线程的查找 & 问题线程的定位:

f77d808c1417cb00c0823e7b21cc3396.png

使用 pt-pmp 工具统计 hang.info 中的进程信息,如下:

2010b676482b6c1840a09198236ac348.png

68edca5aafa970d040cde9a9dde5f5f2.png

0e1869afe9918e3479b0df721070bf3c.png

d49a0ccf429b79583b4615921159247d.png

31253153886d6521f6acc6a65cd92d49.png

cfad2e0a963621cd8b4634323a6aad84.png

ebad0d6d97c923538682bebc78ac994a.png

a115ec6f9f3a75c221aab0d721604955.png

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值