【Mysql】优化-查询有问题的SQL

最新推荐文章于 2022-07-26 12:32:54 发布
最新推荐文章于 2022-07-26 12:32:54 发布
阅读量249 收藏 1
点赞数 1
分类专栏： mysql MySQL
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/n950814abc/article/details/84882552
版权
mysql 同时被 2 个专栏收录
15 篇文章 2 订阅
订阅专栏
MySQL
14 篇文章 2 订阅
订阅专栏

目录

查询截取分析步骤：

一、慢查询日志：

什么是慢查询日志？

如何使用？

查看并开启

什么样的SQL才会记录到慢查询里面？

记录慢SQL并后续分析：

日志分析工具：mysqldumpslow

工作中常用的参考：

二、Explain + SQL：

是什么？

能干什么？

怎么用？

id

select_type

table：

type：

possible_keys:

key:

key_len:

ref:

rows:

Extra

三、Show Profile

What？

How?

查询截取分析步骤：

  1. 慢查询开启并捕获
  2. explain+慢SQL分析
  3. show profile查询SQL在MYsql服务器里面的执行细节和生命周期情况
  4. SQL服务器的参数调优

 

一、慢查询日志：

什么是慢查询日志？

是MySQL提供的一种日志记录，它用来记录在MySQL中响应时间超过阀值的语句，具体指运行时间超过long_query_time值的SQL，则会被记录到慢查询日志中。

long_query_time默认值为10秒

如何使用？

查看并开启

查看是否开启：

  SHOW VARIABLES LIKE '%slow_query_log%';

 开启：

  set global slow_query_log = 1

设置永久生效：

要永久生效，就必须修改配置文件my.cnf，然后重启mysql服务器。

修改my.cnf文件

slow_query_log = 1

slow_query_log_file = /var/lib/mysql/intern-slow.log

slow_query_log_file，它是指定慢查询日志文件的存放路径，系统默认会给一个缺省的文件host_name-slow.log（如果没有指定参数slow_query_log_file的话）

什么样的SQL才会记录到慢查询里面？

查看当前多少秒算慢

  SHOW VARIABLES LIKE 'long_query_time%';

  默认设置为10秒，大于10秒的才会被记录

设置慢的阙值时间

  set global long_query_time=3;

  mysql源码里是判断大于logn_query_time，而非大于等于。

为什么设置后看不出变化？

  需要重新连接或者新开一个回话才能看到修改值。

 SHOW VARIABLES LIKE 'long_query_time%';

  show global variables like 'long_query_time';

记录慢SQL并后续分析：

查询当前系统中有多少条慢查询记录：

show global status like '%slow_queries%';

进入慢查询日志记录当中查看具体是哪些SQL语句：

日志分析工具：mysqldumpslow

s:是表示按何种方式排序

c:访问次数

l:锁定时间

r:返回记录

t:查询时间

al:平均锁定时间

ar:平均返回记录数

at:平均查询时间

t:即为返回前面多少条的数据

g:后边搭配一个正则匹配模式，大小写不敏感的

工作中常用的参考：

mysqldumpslow -s r -t 10 /var/lib/mysql/localhost-slow.log  // 得到返回记录集最多的10个SQL

mysqldumpslow -s c -t 10 /var/lib/mysql/localhost-slow.log  // 得到访问次数最多的最多的10个SQL

mysqldumpslow -s t -t 10 -g "left join" /var/lib/mysql/localhost-slow.log  // 得到按照时间排序的前10条里面含有左连接的查询语句

mysqldumpslow -s r -t 10 /var/lib/mysql/localhost-slow.log | more  // 建议在使用这些命令时结合|和more使用，否则有可能出现爆屏情况

 

二、Explain + SQL：

是什么？

使用EXPLAIN关键字可以模拟优化器执行SQL语句，从而知道MySQL是如何处理你的SQL语句的。分析你的查询语句或是结构的性能瓶颈。

能干什么？

  • 表的读取顺序
  • 数据读取操作的操作类型
  • 哪些索引可以使用
  • 哪些索引被实际使用
  • 表之间的引用
  • 每张表有多少行被优化器查询

怎么用？

Explain+SQL语句

id

select查询的序列号，包含一组数字，表示查询中执行select子句或操作表的顺序

三种情况：

  1.  id相同，执行顺序由上至下
  2.  id不同，如果是子查询，id的序号会递增，id值越大优先级越高，越先被执行
  3.  id相同不同，同时存在

select_type

查询的类型，主要用于区别：普通查询、联合查询、子查询等的复杂查询

 1.SIMPLE

  简单的select查询，查询中不包含子查询或者UNION

 2.PRIMARY

  查询中若包含任何复杂的子部分，最外层查询则被标记为

 3.SUBQUERY

  在SELECT或者WHERE列表中包含了子查询

 4.DERIVED

  在FROM列表中包含的子查询被标记为DERIVED（衍生）

MySQL会递归执行这些子查询，把结果放在临时表里。

 5.UNION

  若第二个SELECT出现在UNION之后，则被标记为UNION;

若UNION包含在FROM子句的子查询中，外层SELECT将被标记为：DERIVED

 6.UNION RESULT

  从UNION表获取结果的SELECT

table：

显示这一行的数据是关于哪张表的

type：

type列：是指查询的方式，非常重要，是分析“查数据过程”的重要依据

从最好到最差依次是：

system>const>eq_ref>ref>range>index>ALL

1. system

 表只有一行记录（等于系统表），这是const类型的特例，平时不会出现，这个也可以忽略不计

2. const

 表示通过索引一次就找到了，const用于比较primary key或者unique索引。因为只匹配一行数据，所以很快。如将主键至于where列表中，MySQL就能将该查询转换为一个常量

3. eq_ref

 唯一性索引，对于每个索引键，表中只有一条记录与之匹配，常见于主键或唯一索引扫描

4. ref

 非唯一索引扫描，返回匹配某个单独值的所有行。

本质上也是一种索引访问，它返回所有匹配某个单独值的行，然而，

它可能会找到多个符合条件的行，所以他应该属于查找和扫描的混合体

5. range

 只检索给定范围的行，使用一个索引来选择行。key列显示使用了哪个索引

一般就是在你的where语句中出现了between、<、>、in等的查询

这种范围扫描索引扫描比全表扫描要好，因为他只需要开始索引的某一点，而结束语另一点，不用扫描全部索引

6. index

 Full Index Scan,index与ALL区别为index类型只遍历索引树。这通常比ALL快，因为索引文件通常比数据文件小。

all扫描的是所有数据行，index扫描的是所有索引节点

7. all

 FullTable Scan,将遍历全表以找到匹配的行

备注：

 一般来说，得保证查询只是达到range级别，最好达到ref

possible_keys:

显示可能应用在这张表中的索引,一个或多个。但最终只能用1个

查询涉及的字段上若存在索引，则该索引将被列出，但不一定被查询实际使用

key:

实际使用的索引。如果为null则没有使用索引

查询中若使用了覆盖索引，则索引和查询的select字段重叠

key_len:

表示索引中使用的字节数，可通过该列计算查询中使用的索引的长度。在不损失精确性的情况下，长度越短越好。

key_len显示的值为索引最大可能长度，并非实际使用长度，即key_len是根据表定义计算而得，不是通过表内检索出的

ref:

显示索引那一列被使用了，如果可能的话，是一个常数。那些列或常量被用于查找索引列上的值

rows:

根据表统计信息及索引选用情况，大致估算出找到所需的记录所需要读取的行数

Extra

包含不适合在其他列中显示但十分重要的额外信息

 1. Using filesort

  说明mysql会对数据使用一个外部的索引排序，而不是按照表内的索引顺序进行读取。

   MySQL中无法利用索引完成排序操作成为“文件排序”，这种情况不太好，需要优化。

 2. Using temporary

  使用了临时表保存中间结果，MySQL在对查询结果排序时使用临时表。常见于排序order by 和分组查询 group by

 不太好，需要优化。

3. USING index

  表示相应的select操作中使用了覆盖索引（Coveing Index）,避免访问了表的数据行，效率不错！

  如果同时出现using where，表明索引被用来执行索引键值的查找；  如果没有同时出现using where，表面索引用来读取数据而非执行查找动作。

 4. Using where

  表面使用了where过滤

 5. using join buffer

  使用了连接缓存

 6. impossible where

  where子句的值总是false，不能用来获取任何元组

7. select tables optimized away

  在没有GROUPBY子句的情况下，基于索引优化MIN/MAX操作或者

对于MyISAM存储引擎优化COUNT(*)操作，不必等到执行阶段再进行计算，查询执行计划生成的阶段即完成优化。

 8. distinct

  优化distinct，在找到第一匹配的元组后即停止找同样值的工作

 

三、Show Profile

What？

是mysql提供可以用来分析当前会话中语句执行的资源消耗情况。可以用于SQL的调优测量

官网：https://dev.mysql.com/doc/refman/5.5/en/show-profile.html

默认情况下，参数处于关闭状态，并保存最近15次的运行结果

How?

1.是否支持，看看当前的SQL版本是否支持

2.开启功能，默认是关闭，使用前需要开启

3.运行SQL

4.查看结果

show profiles;

5.诊断SQL，

show profile cpu,block io for query 上一步前面的问题SQL 数字号码；

 参数备注

6.日常开发需要注意的结论：出现以下内容任何一个，SQL必须优化

 converting HEAP to MyISAM 查询结果太大，内存都不够用了往磁盘上搬了。

 Creating tmp table 创建临时表

      拷贝数据到临时表

      用完再删除

 Copying to tmp table on disk 把内存中临时表复制到磁盘，危险！！！

 

千g
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 5
    评论
专栏目录
【第15天】MYSQL进阶-查询优化-慢查询日志（SQL 小虚竹)
小虚竹的专栏
09-30 1万+
慢查询日志windows和linux下的解决方案
【第18天】MYSQL进阶-查询优化- SHOW PROFILE（SQL 小虚竹)
小虚竹的专栏
10-08 1万+
show profile
mysql查询问题sql语句_MySQL SQL查询语句问题
weixin_39831503的博客
02-05 88
这个我会。。。。mysql> select * from test.user_result;+-------+------------+--------+--------+------+------------+---------------------+| id | user | pwd | result | file | time | date ...
【Mysql】常用SQL及问题排查
qqchaozai的专栏
10-26 403
修改字段： ALTER TABLE table_name ADD column_name datatype ALTER TABLE table_name DROP COLUMN column_name ALTER TABLE table_name ALTER COLUMN column_name datatype 查询表结构 select COLUMN_NAME, column_commen...
mysql 语句/常用函数 | 问题排查
fjbadm的专栏
04-23 228
show full processlist 用来查看当前线程处理情况 一般用到show processlist或show full processlist都是为了查看当前 mysql 是否有压力，都在跑什么语句，当前语句耗时多久了，有没有什么慢 SQL 正在执行之类的 可以看到总共有多少链接数，哪些线程有问题(time是执行秒数，时间长的就应该多注意了)，然后可以把有问题的线程 kil...
MySQL查看正在运行的SQL
壹升茉莉清的博客
07-26 1万+
​在安装MySQL的时候会默认初始化几个MySQL运行所需的数据库mysql,sys,information_schema,performance_schema.这几个库存储了MySQL在运行过程中的配置信息，运行信息，参数配置，数据库信息，表信息等等。今天这个要查看正在运行的SQL主要用到的是information_schema和performance_schema这两个库。............
mysql优化，Using temporary； Using filesort
xxhhbb1538的专栏
08-17 7736
多表关联时，在order by中使用了非驱动表字段进行排序，会出现Using temporary; Using filesort，此时需要优化。 mysql会自动将数据量较小的表设置为驱动表，但是我们排序的字段又不是该表的字段，使用left join，可以阻止小表被优化为驱动表，但是这种方式往往无法满足业务需求。 此时使用exists子查询刚好满足需求，可以使该表不再被动的置为驱动表，不再出现Using temporary; Using filesort ...
【MySQL深入】SQL查询优化
白夜行
02-13 282
1. 查询优化点 尽量避免全表扫描，应考虑在 where 及 order by 涉及的列上建立索引 尽量避免在 where 子句中对字段进行 null 值判断 尽量避免在 where 子句中使用!=或<>或or操作符，可以用IN()取代OR 尽量避免在 where 子句中对字段进行函数操作 尽量避免大事务操作，提高系统并发能力 避免查询不需要的数据，尽量少用select * ，只查询需要的字段即可。 只要一行数据时使用 LIMIT 1 永远为每张表设置一个ID作为主键 把IP地址存成 UNSI
Mysql查询优化
shefin90的博客
05-08 759
查询优化的常用策略、连接的优化、group by 、distinct、order by语句优化、优化子查询、优化limit子句等等
jdbc-mysql-connector-j-8.0.31.jar jdbc-sqljdbc41.jar
02-08
在IT行业中，数据库接口自动化测试是一项至关重要的任务，它能够有效地确保系统的稳定性和数据的一致性。...在实际工作中，这样的自动化测试方案有助于提前发现并解决问题，提高软件质量和开发效率。
mysql优化-sql高级
06-13
mysql优化从以下几个方面介绍 mysql的架构 索引优化分析 查询截取分析 mysql锁机制 主从复制
mysql面试题-mysql经典面试题目-数据库的基本概念-SQL语法-事务处理-索引优化-性能调优-mysql-面试题目
最新发布
01-20
【MySQL面试题】在面试MySQL相关的职位时，面试官可能会问到一系列关于数据库基础、SQL语法、事务处理、索引优化以及性能调优的问题。以下是一些可能的面试重点： 1. **数据库基本概念**： - 数据库是用于存储和...
mysql，公司真实查询sql，看到后整个人就不好了
“愤斗”小四
11-15 670
 1.公司一个报表查询业务，sql如下： SELECT tend.sellId, au.name AS userName, SUM(sellTotalPrice) AS sellTotalPrice , SUM(refundTotalPrice) AS refundTotalPrice, SUM(sellTotalPrice_ali) AS sellTotalPrice_ali , SUM...
Mysql合并查询的多个结果集，Mysql中UNION ALL的使用
weixin_43937112的博客
06-13 1299
user表结构如下所示： 现在要查询username = '小二王’和username = '测试’的数据，并把两次查询的结果拼接到一起，sql语句： SELECT * FROM `user` WHERE username = '小二王' UNION ALL SELECT * FROM `user` WHERE username = '测试' 查询结果如下所示： 要注意相同的查询的列必须是相同的，如果两次查询的某一条结果是相同，也不会合并 例： sql语句： SELECT username,sex F
高性能MySQL调优实战
weixin_45596022的博客
02-26 2354
一，数据库应该如何优化 数据库优化有很多层面。 1，SQL与索引 因为 SQL 语句是在我们的应用端编写的，所以第一步，我们可以在程序中对 SQL 语句进行优化，最终的目标是用到索引。这个是容易的也是最常用的优化手段。 2，表与存储引擎 数据是存放在表里面的，表又是以不同的格式存放在存储引擎中的，所以我们可以选用特定的存储引擎，或者对表进行分区，对表结构进行拆分或者冗余处理，或者对表结构比如字段的定义进行优化。 3，架构 对于数据库的服务，我们可以对它的架构进行优化。 如果只有一台数据库的服务器，我们可以运
【mysql】mysql删除重复记录并且只保留一条
热门推荐
千千
09-03 24万+
目录 一、单个字段的操作 分组介绍： 1. 查询全部重复的数据： 2. 删除全部重复试题： 3. 查询表中多余重复试题（根据depno来判断，除了rowid最小的一个） a. 第一种方法： b. 第二种方法： c. 补充第三种方法（根据评论区给的删除总结出来的）： 4. 删除表中多余重复试题并且只留1条： a. 第一种方法： b. ☆第二种方法（与上面查询的第二种方法对应，只...
【MySQL】mysql区分大小写问题
千千
06-08 2万+
最近模糊查询数据库里面的内容时，发现查询出来的内容与自己想要的不一样，筛选的结果区分了大小写。 参考博客链接：https://www.cnblogs.com/457248499-qq-com/p/7360284.html 1、MySQL默认情况下是否区分大小写，使用show Variables like '%table_names'查看lower_case_table_names的值，0...
Navicat连接的某个表一直加载并且不能关闭
千千
03-15 7289
问题： 今天下午突然发现数据库的一张表一直加载，也出不来数据，并且也不能关闭。 解决办法： 在Navicat中中执行如下命令： SHOW PROCESSLIST; 如果state列中有lock字眼，通过info就可以知道那张表被锁住了 然后将进程杀死就可以了 kill 166840; //数字是进程的id 参考博客：https://blog.csdn.net/qq_231675...
MySQL高级优化：查询与索引实战解析
5. SQL执行顺序：了解SQL的执行顺序，包括手写SQL的顺序（从左到右），有助于优化查询逻辑，减少计算量。使用DISTINCT关键字和LIMIT限制结果集也是常见的性能优化手段。 6. JOIN查询实践：文章提供了七个不同JOIN...
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值