【Mysql】慢sql分析优化案例汇总

最新推荐文章于 2023-12-26 17:59:59 发布
最新推荐文章于 2023-12-26 17:59:59 发布
阅读量581 收藏 2
点赞数 1
文章标签： sql mysql 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44823875/article/details/128319599
版权

【Mysql】慢sql分析优化案例汇总

（一）案例一：阿里云慢sql挑战赛实战

190毫秒干到2毫秒

【1】表结构
在这里插入图片描述
【2】待优化sql
在这里插入图片描述
【3】第一次explain分析
在这里插入图片描述
【4】选取驱动表
优先选择数据量最小的表作为驱动表。a表和c表都是只有一条数据，但是a表的sql里有gmt_create进行排序，可以在这个字段上添加索引，从索引的利用率上来看，用a表作为驱动表是最合适的。
在这里插入图片描述
【5】开始创建索引
将关联字段和查询字段创建联合索引，有效减少回表数据量
在这里插入图片描述

【6】再次执行explain
c表上的user_id的索引生效了，其他两个表的索引没有生效
在这里插入图片描述

【7】执行explain extended
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
【8】修改表结构，选择合适的字段
在这里插入图片描述

【9】最后explain看优化结果
之前索引失效是因为字段类型不一致而隐式转型导致的
在这里插入图片描述

fixAllenSun
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
MySQL的id关联和索引使用的实际优化案例
01-19
昨晚收到客服MM电话，一用户反馈数据库响应非常慢，手机收到load异常报警，登上主机后发现大量sql执行非常慢，有的执行时间超过了10s 优化点一： SELECT * FROM `sitevipdb`.`game_shares_buy_list` WHERE price>='2.00′ ORDER BY tran_id DESC LIMIT 10; 表结构为： CREATE TABLE `game_shares_buy_list` ( `tran_id` int(10) unsigned NOT NULL AUTO_INCREMENT, `………..' PRIMARY KEY (`t
MySQL版SQL优化
06-14
本课程通过Centos版的MySQL讲解了SQL优化的一些常见手段。 其中讲解了MySQL的分层、存储引擎等底层逻辑，并讲解了常见的索引优化手段。在讲解时，先通过理论对先关的优化知识进行了铺垫，然后使用实际的案例详细的演示了每一次的优化操作。 并且在课程的最后，还讲解了如何使用MySQL实现主从同步功能。 本课程大致包含了以下几方面的内容： 1.MySQL底层逻辑 2.常见的优化手段 3.常见的优化原则 4.优化工具的使用 5.主从同步 相信通过本课程的学习，大家可以对MySQL的性能优化有一定的理解和认识。为后续高性能系统的开发打下良好的基础和准备。
MySQL索引优化的实际案例分析
12-15
Order by desc/asc limit M是我在mysql sql优化中经常遇到的一种场景，其优化原理也非常的简单，就是利用索引的有序性，优化器沿着索引的顺序扫描，在扫描到符合条件的M行数据后，停止扫描；看起来非常的简单，但是我经常看到很多性能较差的sql没有利用这个优化规律，下面将结合一些实际的案例来分析说明： 案例一： 一条sql执行非常的慢，执行时间为： root@test 02:00:44 SELECT * FROM test_order_desc WHERE END_TIME>now() ORDER BY GMT_CREATE DESC,count_num DESC LI
MySQL管理之道 性能调优、高可用与监控.part2.rar
09-28
《mysql管理之道：性能调优、高可用与监控》由资深mysql专家撰写，以最新的mysql版本为基础，以构建高性能mysql服务器为核心，从故障诊断、表设计、sql优化、性能参数调优、mydumper逻辑、xtrabackup热备份与恢复、mysql高可用集群搭建与管理、mysql服务器性能和服务监控等方面多角度深入讲解了如何去管理与维护mysql服务器。 书中内容以实战为导向，所有内容均来自于笔者多年实践经验的总结和对新知识的拓展，同时也针对运维人员、dba等相关工作者会遇到的有代表性的疑难问题给出了实用的情景模拟，并给出了解决方案。不论你目前有没有遇到过此类问题，相信对你以后处理相关问题都会有所借鉴。本书适合所有希望构建和管理高性能、高可用性的mysql数据库系统的开发者和dba阅读。 目录 · · · · · · 前言 第一部分　mysql5.5 新特性篇 第1章　mysql5.5介绍 2 1.1　性能上的显著改变 2 1.1.1　mysql5.5默认存储引擎的调整 2 1.1.2　充分利用cpu多核的处理能力 7 1.1.3　提高刷新脏页数量和合并插入数量，改善磁盘i/o处理能力 8 1.1.4　增加自适应刷新脏页功能 9 1.1.5　让innodb_buffer_pool缓冲池中的热数据存活更久 9 1.1.6　innodb的数据恢复时间加快 11 1.1.7　innodb同时支持多个bufferpool实例 15 1.1.8　可关闭自适应哈希索引 17 1.1.9　在innodb中可选择使用内存分配程序 18 1.1.10　提高默认innodb线程并发数 21 1.1.11　预读算法的变化 22 1.1.12　首次在linux上实现了异步i/o 23 1.1.13　恢复组提交 24 1.1.14　innodb使用多个回滚段提升性能 26 1.1.15　改善清除程序进度 26 .1.1.16　添加删除缓冲和清除缓冲 27 1.1.17　控制自旋锁spin lock轮训间隔 28 1.1.18　快速创建、删除、更改索引 29 1.1.19　innodb支持创建压缩数据页 30 1.1.20　可动态关闭innodb更新元数据的统计功能 37 1.2　安全性、稳定性的显著改变 38 1.2.1　复制功能加强 38 1.2.2　中继日志relay-log可自我修复 39 1.2.3　开启innodb严格检查模式 39 1.3　动态更改系统配置参数 39 1.3.1　支持动态更改独立表空间 39 1.3.2　支持动态更改innodb锁超时时间 40 1.4　innodb新参数汇总 40 1.5　同步复制新参数汇总 48 1.6　sql语句写法的改变 53 1.6.1　delete表连接语法改变 53 1.6.2　mysql5.5存储过程支持limit变量 54 1.7　mysql5.1升级为mysql5.5 55 1.7.1　采用mysql_upgrade升级授权表方式升级 55 1.7.2　直接安装mysql5.5，采用数据导出/导入方式升级 59 1.8　性能测试：mysql5.5与mysql5.1 60 第2章　半同步复制 62 2.1　半同步复制简介 62 2.2　半同步复制安装配置 63 2.3　参数说明 63 2.4　功能测试 64 2.4.1　如何验证半同步复制是否正常工作 64 2.4.2　半同步复制与异步复制的切换 65 2.5　性能测试 68 2.6　小结 70 第二部分　故障诊断与性能优化篇 第3章　故障诊断 72 3.1　影响mysql性能的因素 72 3.2　系统性能评估标准 73 3.2.1　影响linux服务器性能的因素 73 3.2.2　系统性能评估指标 74 3.2.3　开源监控和评估工具介绍 76 3.3　故障与处理 79 3.3.1　连接数过多导致程序连接报错的原因 79 3.3.2　记录子查询引起的宕机 84 3.3.3　诊断事务量突高的原因 87 3.3.4　谨慎设置binlog_format=mixed 90 3.3.5　未设置swap分区导致内存耗尽，主机死机 94 3.3.6　mysql故障切换之事件调度器注意事项 95 3.3.7　人工误删除innodb ibdata数据文件，如何恢复 97 3.3.8　update忘加where条件误操作恢复（模拟oracle闪回功能） 99 3.3.9　delete忘加where条件误操作恢复（模拟oracle闪回功能） 108 第4章　同步复制报错故障处理 112 4.1　最常见的3种故障 112 4.1.1　在master上删除一条记录时出现的故障 112 4.1.2　主键重复 114 4.1.3　在master上更新一条记录，而slave上却找不到 115 4.2　特殊情况：slave的中继日志relay-log损坏 116 4.3　人为失误 118 4.4　避免在master上执行大事务 119 4.5　slave_exec_mode参数可自动处理同步复制错误 120 4.6　如何验证主从数据一致 121 4.7　binlog_ignore_db引起的同步复制故障 123 4.8　mysql5.5.19/20同步一个bug 124 4.9　恢复slave从机上的某几张表的简要方法　 126 4.10　如何干净地清除slave同步信息 127 第5章　性能调优 129 5.1　表设计 129 5.2　字段类型的选取 133 5.2.1　数值类型 134 5.2.2　字符类型 139 5.2.3　时间类型 141 5.2.4　小技巧：快速修改表结构 148 5.2.5　pt-online-schema-change在线更改表结构 152 5.2.6　mysql5.6在线ddl更改表测试 158 5.3　采用合适的锁机制 161 5.3.1　表锁的演示 161 5.3.2　行锁的演示 164 5.3.3　innodb引擎与myisam引擎的性能对比 166 5.4　选择合适的事务隔离级别 168 5.4.1　事务的概念 168 5.4.2　事务的实现 169 5.4.3　事务隔离级别介绍 171 5.5　sql优化与合理利用索引 177 5.5.1　如何定位执行很慢的sql语句 177 5.5.2　sql优化案例分析 178 5.5.3　合理使用索引 188 5.6　my.cnf配置文件调优 198 5.6.1　per_thread_buffers优化 198 5.6.2　global_buffers优化 200 5.6.3　query cache在不同环境下的使用 201 5.6.4　tuning-primer.sh性能调试工具的使用 205 5.6.5　72 gb内存的my.cnf配置文件 208 5.6.6　谨慎使用分区表功能 211 5.7　mysql5.6同步复制新特性详解 213 第6章　备份与恢复 223 6.1　冷备份 224 6.2　逻辑备份 224 6.2.1　mysqldump增加了一个重要参数 225 6.2.2　取代mysqldump的新工具mydumper 226 6.2.3　逻辑备份全量、增量备份脚本 229 6.3　热备份与恢复 230 第三部分　高可用集群管理篇 第7章　目前流行的4种高可用架构 236 7.1　采用mysql自带的replication架构 237 7.1.1　keepalived+mysql replication架构的搭建演示 237 7.1.2　mmm+mysql replication架构的搭建演示 241 7.2　heartbeat+drbd+mysql架构的搭建演示 249 7.3　红帽rhcs共享存储架构的搭建演示 254 7.3.1　安装过程 257 7.3.2　红帽rhcs集群的维护 265 7.4　mysql高可用集群ha解决方案的测试评估 267 第8章　批量管理服务器 270 8.1　开源工具pssh的使用方法 270 8.2　自己编写的ssh服务器批量管理工具 273 第四部分　监控篇 第9章　性能监控 278 第10章　服务监控 283 10.1　nagios搭建与维护 283 10.2　mysql数据库的监控脚本 288 第五部分　项目案例 第11章　项目案例讲解 292 11.1　数据碎片整理方案 292 11.2　用户信息表水平拆表方案 296 11.3　阿里巴巴中间件cobar水平拆表方案 299
MySQL的经典SQL优化12例（更新于2023年12月28日）
zping的博客
06-08 118
下列优化的SQL案例，区别于平常加SQL索引的方法优化，大部分都是通过改写SQL语句方法优化，都是日常优化线上慢SQL的实际案例，有比较好的代表性(思路和方法)，也是对自己这些年来做SQL优化的总结，对后面优化SQL有很好的提示和借鉴，案例会持续更新中。 说明： 最近优化慢SQL，执行计划错误和OR条件查询优化实战经验，提供优化SQL思路和方法： 1，利用exist...
慢SQL解决方案
wu_noah的博客
11-28 5546
1. 背景 慢SQL是稳定性中重要的一部分，一般指查询时间超过1s或扫描行数百万的SQL操作，可以通过show variables like 'long_query_time'查看。对于交易这类对稳定性要求很高的业务来说治理慢SQL格外重要。这里总结下交易中不同业务存在的慢SQL问题，以及一些通用的解决方案 慢SQL发现方式有：SRS慢SQL治理平台、CloudDBA慢SQL日志、交易慢SQL报表（离线表cda_sql.das_slowsql_detail_aligroup） 2. 危害 响应时
线上sql执行慢，分享3个优化案例
Wayn111的博客
03-19 1026
😘。
[干货] 如何解决慢SQL？详细分析和优化实践！
DevCorner的Pro技术博客
06-10 3356
简单来说，慢SQL指的是执行时间较长的SQL语句。在数据库中，一个查询的运行时间往往会受到多种因素的影响，例如表结构、数据量和索引等。如果一条SQL语句的执行时间较长，就会降低数据库的整体性能和用户体验。因此，我们需要对慢SQL进行分析和优化，使得这些语句能够更快地执行并节省资源。慢SQL的优化是一个持续不断的过程，并没有最佳结果，需要不断借助工具进行监控分析、针对实际情况进行调整。
MySQL的慢sql优化
gaojie12的博客
11-11 3655
针对慢sql优化思路整理 一、开启慢查询 开启慢查询有两种方式： 1⃣️修改配置文件 windows下：配置文件为my.ini，一般在mysql的安装目录下，或c:\\windows下 linux下：配置文件为my.cnf，一般在/etc下 在配置文件的[mysqld]下加入如下语句 [mysqld] slow_query_log = ON slow_query_log_file = /usr/local/mysql/data/slow.log long_query_time = 1 2⃣
记一次mySQL慢sql优化
qq_34760272的博客
03-25 413
一、情景再现 8月的某日上午，客服反馈“商城详情页打不开了！”。于是马上打开商城详情页，果然，相应缓慢，504异常。查看duubo服务，发现qps达到了8千多，线程池爆满，mysql的cpu达到100%。 是不是某个业务线刚刚上线疯狂调用服务导致？询问过后发现并没有。之前监控过详情页处理某个业务的接口，逻辑复杂，查询缓慢，但是不至于导致这个结果吧？（侥幸心理）。根本原因大概率就是数据库的问题，到底是什么原因呢？排查后发现全是慢查询和全表扫描，最后找到了作妖的sql： ...
收集一些常见的 MySQL 死锁案例
04-02
这个项目收集了一些常见的 MySQL 死锁案例，大多数案例都来源于网络，并对其进行分类汇总，试图通过死锁日志分析出每种死锁的原因，还原出死锁现场。 实际上，我们在定位死锁问题时，不仅应该对死锁日志进行分析，...
数据库实战-收集一些常见的 MySQL 死锁案例.zip
05-20
这个项目收集了一些常见的 MySQL 死锁案例，大多数案例都来源于网络，并对其进行分类汇总，试图通过死锁日志分析出每种死锁的原因，还原出死锁现场。 实际上，我们在定位死锁问题时，不仅应该对死锁日志进行分析，...
MYSQL数据库入门实战课程-重点笔记
04-03
如何学习数据库（新⼿必看）？...MySQL函数⼤全，MySQL常⽤函数汇总 MySQL约束、函数和运算符 MySQL数据类型和存储引擎数据库设计 SQL是什么？它能做什么？ 电商平台(B2B2C)项⽬实战数据库设计 mysql 常⽤sql 语句
一些常见的MySQL死锁案例-mysql-deadlocks-master（源代码+案例+图解说明）
最新发布
05-23
这个项目收集了一些常见的 MySQL 死锁案例，大多数案例都来源于网络，并对其进行分类汇总，试图通过死锁日志分析出每种死锁的原因，还原出死锁现场。 实际上，我们在定位死锁问题时，不仅应该对死锁日志进行分析，还...
如何优化慢SQL？常见案例
一个写湿的程序猿
05-12 902
这前言SQL 优化一般步骤通过慢查日志等定位那些执行效率较低的 SQL 语句explain 分析SQL的执行计划 前言 在应用开发的早期，数据量少，开发人员开发功能时更重视功能上的实现，随着生产数据的增长，很多 SQL 语句开始暴露出性能问题，对生产的影响也越来越大，有时可能这些有问题的 SQL 就是整个系统性能的瓶颈。 SQL 优化一般步骤 通过慢查日志等定位那些执行效率较低的 SQL 语句 explain 分析SQL的执行计划 需要重点关注 type、rows、filtered、extra。 type
SQL优化案例精彩连载（一）
老叶茶馆
06-26 804
导读 知数堂致力于为学员的职场之路保驾护航，课上课下不遗余力为广大学员排忧解难！ SQL优化课郑松华老师根据帮学员优化的案例为原型，和大家分享各式优化思路，本文为连载系列第一篇，将不定期陆续更新，敬请关注！   待优化场景 执行计划见下： 该表的几个索引见下：   SQL优化之路 首先，我们先review下这个SQL： mysql>
SQL语句常见优化十大案例
weixin_33975951的博客
03-03 1221
1、慢SQL消耗了70%~90%的数据库CPU资源；2、SQL语句独立于程序设计逻辑，相对于对程序源代码的优化，对SQL语句的优化在时间成本和风险上的代价都很低；3、SQL语句可以有不同的写法；下面是我总结的一些SQL常见的优化方法，每个案例都简单易懂，在开发过程中可以作为参考：1、不使用子查询例：SELECT * FROM t1 WHERE id (SELECT id FROM t2 WHERE...
mysql之SQL优化实例
Rust94的博客
10-11 466
union和union all的区别是，union会自动压缩多个结果集合中的重复结果，而union all则将所有的结果全部显示出来，不管是不是重复。所谓的函数索引其实本质上解释还是btree索引，实现的方式主要是通过在数据表中新增一个字段用来存放函数字段列，然后对这个字段定义一个索引。若null的列为索引时，每个索引记录需要一个额外的字节。很多时候我们需要检查数据库的设计是否合理，比如我们使用允许为空的字段修改为0或者其他特殊字符代替，，对结果的合并，排序等操作需要费大量的CPU和内存资源，
企业慢SQL案例分析
qq_31142237的博客
12-26 911
4、b表使用到了索引material_requirements_detail_k001，索引使用栏位tenantsid，eoc_company_id，eoc_site_id，Server层过滤栏位wo_no、op_no、item_no、item_feature_no、plan_date ，扫描行数2359，成本8669.88，哦豁！在索引最后加上eoc_site_id。在c表执行计划中，使用到了wo_wo_no_IDX索引，且索引栏位为wo_no ，同时存在索引过滤index_condtion。
mysql 慢sql优化流程
06-09
2. 分析慢 SQL：对收集到的慢 SQL 进行分析，找出其中的性能瓶颈和问题，例如查询语句中的 JOIN 操作、子查询、全表扫描等。 3. 优化慢 SQL：对分析出的慢 SQL 进行优化，可以采取多种优化策略，例如优化查询语句、...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值