慢SQL治理方法论

本文探讨了慢SQL对业务和数据库性能的影响,介绍了如何发现慢SQL,包括数据库自带的慢查询日志和应用服务如DruidDataSource、Mybatis Interceptor的机制。接着,讲解了定位和分析慢SQL的步骤,如使用explain和show profile,以及业务层面的考量。最后,提出了SQL优化和业务改造的解决方案,如索引优化、减少数据扫描、业务逻辑调整和数据拆分、归档等策略,旨在提高系统性能。
摘要由CSDN通过智能技术生成

一、背景

       从业务的角度来看:慢SQL会增加RT,导致产品用户体验差,降低用户对产品的好感度。
       从数据库的角度来看:慢SQL会影响数据库的性能,每个SQL执行都会消耗一定的资源。假设总资源是100,一条慢SQL占用了30的资源1分钟。那么在这1分钟时间内,其他SQL能够分配的资源总量就是70,如此循环,当资源分配完的时候,所有的新SQL执行就会开始等待。

二、发现

       在治理慢SQL前我们需要知道哪些SQL是慢SQL,即明确治理的对象。

2.1、数据库自带的慢sql发现机制

       MySQL本身提供了慢查询日志,当SQL耗时超过指定阈值的时候,会将SQL记录到慢查询日志文件中,用户能够从慢查询日志文件中提取出慢SQL。

2.2、应用服务的慢sql发现机制

2.2.1、DruidDataSource

spring.datasource.druid.filters=stat
spring.datasource.druid.filter.stat.log-slow-sql=true
spring.datasource.druid.filter.stat.slow-sql-millis=1000

2.2.2、Mybatis Interceptor机制

       利用Executor或者StatementHandler,拦截执行情况,相对于DruidDataSource,这个是一条sql的整体执行时间,如果使用了shardingjdbc这种在客户端进行分库分表的技术栈,用DruidDataSource如果有跨表或者跨库查询那么就无法知道sql完整的执行时间。笔者推荐使用StatementHandler,没有获取connection的等待时间,执行时间更精确

三、定位

       现在我们发现慢SQL,那么需要将这些慢SQL按不同的服务进行区分并整理一份文档,再定位到对应应用的代码,在文档中记录慢SQL使用在什么业务中,运行在什么场景中(

  • 31
    点赞
  • 40
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

qq_33080131

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值