关闭

MySQL日志文件之错误日志和慢查询日志详解

标签: mysql错误日志慢查询日志slowquery
7786人阅读 评论(2) 收藏 举报
分类:

实验环境:MySQL Community Server (GPL) 5.7.17、Ubuntu 16.04

一、MySQL日志文件分类

官方文档:

https://dev.mysql.com/doc/refman/5.7/en/server-logs.html

这里写图片描述

日志文件记录了影响MySQL数据库的各种类型活动。常见的日志有以下几个:

1、错误日志(error log);
2、慢查询日志(slow query log);
3、二进制日志(binlog);
4、查询日志(log);

二、错误日志

1、官方介绍文档:

https://dev.mysql.com/doc/refman/5.7/en/error-log.html

2、MySQL错误日志是记录MySQL 运行过程中较为严重的警告和错误信息,以及MySQL每次启动和关闭的详细信息。

可以通过命令查看MySQL错误日志文件位置:

mysql> show variables like 'log_error'\G;

这里写图片描述

查看如下:

这里写图片描述

三、慢查询日志

1、官方介绍文档:

https://dev.mysql.com/doc/refman/5.7/en/slow-query-log.html

2、MySQL的慢查询日志是MySQL提供的一种日志记录,它用来记录在MySQL中响应时间超过阀值的语句,具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询日志中。

long_query_time的默认值为10,意思是运行10s以上的语句。

默认情况下,MySQL数据库并不启动慢查询日志,需要我们手动来设置这个参数,当然,如果不是调优需要的话,一般不建议启动该参数,因为开启慢查询日志会或多或少带来一定的性能影响。

慢查询日志支持将日志记录写入文件,也支持将日志记录写入数据库表。

3、可以通过如下命令查看默认阀值和是否开启:

#默认的阀值时间
mysql> show variables like 'long_query_time'\G;

这里写图片描述

#是否开启
mysql> show variables like 'slow_query_log'\G;

这里写图片描述

4、开启慢查询日志:

mysql> set global slow_query_log='ON';

这里写图片描述

5、默认的慢查询日志文件目录

mysql> show variables like 'slow_query_log_file'\G;

这里写图片描述

可以看出默认的慢查询日志,是以主机名和‘-slow’为名的,默认:host_name-slow.log

6、查看慢查询日志

使用mysqldumpslow命令查看方式如下:

xuliugen@xuliugen:~$ sudo mysqldumpslow /var/lib/mysql/xuliugen-slow.log

这里写图片描述

关于mysqldumpslow 的更多使用方法,使用man mysqldumpslow 可以进行查看:

这里写图片描述

7、更改慢查询的存储方式

首先,通过命令查看日志的默认存储方式:

mysql> show variables like 'log_output'\G;

这里写图片描述

可以得知,默认的存储方式是FILE即,存放在/var/lib/mysql/xuliugen-slow.log 下。

查看官方文档对log_output 属性的介绍:

这里写图片描述

可以把方式改成TABLE的方式。

mysql> set global log_output='TABLE';

这里写图片描述

修改为TABLE的方式之后,慢查询日志会以表的形式进行存储,在mysql数据库下的slow_log表中:

mysql> show create table mysql.slow_log\G;

这里写图片描述

8、测试慢查询日志

使用命令模拟慢查询:

mysql> select sleep(10);

这里写图片描述

查看慢查询日志:

mysql> select * from mysql.slow_log\G;

这里写图片描述

9、更改默认的阀值时间

mysql> set global long_query_time=1;

这里写图片描述

退出mysql console,重新登陆之后,查看:

这里写图片描述

为什么要退出之后,才可以产看的到值得修改哪?这是因为long_query_time 属性是基于当前会话的,官方文档如下:

这里写图片描述

模拟两次慢查询,一次时间为0.9s、一次为1.1s:

这里写图片描述

查看慢查询日志如下:

这里写图片描述

可以看出来只有1.1s的记录进去了,说明设置阀值时间成功。

10、MySQL 5.7版本中还有两个属性:

 log_slow_admin_statements
 log_queries_not_using_indexes

在默认的情况下管理员操作数据库的命令(包括:ALTER TABLE, ANALYZE TABLE, CHECK TABLE, CREATE INDEX, DROP INDEX, OPTIMIZE TABLE, and REPAIR TABLE.)和查询的没有索引的语句是不进行记录的。

这里写图片描述

关于这两个属性可以在开发环境的时候进行设置,在实际的生产环境中由于对于没有使用所索引的情况,这类的SQL语句会被频繁的记录到slow log中,使得slow log文件的大小不断增加,因此,因改进行合理的设置。

6
0
查看评论

elk 5.1 用于mysql slow 日志

最近面临一个任务,要对mysql的慢查询日志进行整理输出。之前的Le的时候,写过一个脚本,multiline处理mysql的日志,然后每天发送日志。不过,由于日志格式不同,有些可以解析,但是有些也是解析错误了。听说elk很牛已经很久了,之前也测试过,当时是为了打造一款日志处理中心,但是需要有RBA功...
  • vbaspdelphi
  • vbaspdelphi
  • 2016-12-27 20:35
  • 599

MySQL 错误日志(Error Log)

同大多数关系型数据库一样,日志文件是MySQL数据库的重要组成部分。MySQL有几种不同的日志文件,通常包括错误日志文件,二进制日志,通用日志,慢查询日志,等等。这些日志可以帮助我们定义mysqld内部发生的事情,数据库性能故障,记录数据的变更历史,用户恢复数据库等等。本文主要描述错误日志文件。1、...
  • robinson_0612
  • robinson_0612
  • 2014-10-03 21:48
  • 39975

MySQL日志文件之错误日志和慢查询日志详解

实验环境:MySQL Community Server (GPL) 5.7.17、Ubuntu 16.04 一、MySQL日志文件分类 官方文档: https://dev.mysql.com/doc/refman/5.7/en/server-logs.html ...
  • qq_34107571
  • qq_34107571
  • 2017-08-15 10:18
  • 221

MySQL日志文件之错误日志和慢查询日志详解

实验环境:MySQL Community Server (GPL) 5.7.17、Ubuntu 16.04一、MySQL日志文件分类官方文档:https://dev.mysql.com/doc/refman/5.7/en/server-logs.html常见的日志有以下几个:1、错误日志(error...
  • u010870518
  • u010870518
  • 2017-07-24 22:20
  • 7786

ELK实时日志分析平台环境部署--完整记录

在日常运维工作中,对于系统和业务日志的处理尤为重要。今天,在这里分享一下自己部署的ELK(+Redis)-开源实时日志分析平台的记录过程(仅依据本人的实际操作为例说明,如有误述,敬请指出)~ 一、概念介绍 日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器...
  • gebitan505
  • gebitan505
  • 2017-04-21 18:21
  • 1903

Mysql中错误日志、binlog日志、查询日志、慢查询日志简介

前言 数据库的日志是帮助数据库管理员,追踪分析数据库曾经发生的各种事件的有力依据,mysql中提供了错误日志、binlog日志(二进制日志)、查处日志、慢查询日志。在此,我力求解决以下问题:各个日志的作用是什么?怎样去控制这些日志呢?怎样去使用这些日志提供的信息呢? 错误日志 1.错误日志作用 错误...
  • hsd2012
  • hsd2012
  • 2016-04-13 17:53
  • 9184

mysql 慢查询日志设置

慢查询日志相关参数 MySQL 慢查询的相关参数解释: slow_query_log    :是否开启慢查询日志,1表示开启,0表示关闭。 log-slow-queries  :旧版(5.6以下版本)MySQL数据库慢查询日志存储路径。...
  • shukebai
  • shukebai
  • 2017-04-11 17:26
  • 1992

shell脚本分析mysql慢查询日志(slow log)

使用percona公司的pt-query-digest分析慢查询日志,分析、统计的结果的比较清晰
  • offbeatmine
  • offbeatmine
  • 2015-07-30 10:09
  • 1058

ELK实时日志分析平台环境部署--完整记录

在日常运维工作中,对于系统和业务日志的处理尤为重要。今天,在这里分享一下自己部署的ELK(+Redis)-开源实时日志分析平台的记录过程(仅依据本人的实际操作为例说明,如有误述,敬请指出)~ 一、概念介绍 日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器...
  • DINGYANG0315
  • DINGYANG0315
  • 2018-02-01 14:54
  • 132

寻找Windows下MySQL的错误日志

MySQL版本:5.6 Windows版本:Win7 64 MySQL的错误日志记录了MySQL服务器启动、关闭和运行时出错等信息。默认名称为host_name.err,保存在MySQL实例指定的data目录下。但在MySQL的安装目录下的data目录并没有此文件。 查看错误日志的路径: 发...
  • dreamcs
  • dreamcs
  • 2016-12-07 10:53
  • 6563
    个人资料
    • 访问:2672391次
    • 积分:25409
    • 等级:
    • 排名:第290名
    • 原创:484篇
    • 转载:45篇
    • 译文:1篇
    • 评论:1063条
    Java后端技术 微信公众号
    Java大型互联网技术资源分享群: 574683650
    博客专栏
    最新评论