zlk管理mysql日志_MySQL 日志管理 (一)

错误日志(log_error)

记录启动\关闭\日常运行过程中,状态信息,警告,错误

默认就是开启的: /数据路径下/hostname.err

配置:

vi /etc/my.cnf

log_error=/var/log/mysql.log

log_timestamps=system

# 重启生效

查看方式

select @@log_error;

+---------------------+

| @@log_error |

+---------------------+

| /var/log/mysqld.log |

+---------------------+

show variables like 'log_error';

+---------------+---------------------+

| Variable_name | Value |

+---------------+---------------------+

| log_error | /var/log/mysqld.log |

+---------------+---------------------+

binlog(binary logs):二进制日志

作用

(1)备份恢复必须依赖二进制日志

(2)主从环境必须依赖二进制日志

binlog配置 (5.7必须加server_id)

# 是否开启 log_bin 日志

select @@log_bin;

+-----------+

| @@log_bin |

+-----------+

| 1 |

+-----------+

# 日志的名字及位置

select @@log_bin_basename;

+--------------------------+

| @@log_bin_basename |

+--------------------------+

| /var/lib/mysql/mysql-bin |

+--------------------------+

# 服务ID号

select @@server_id;

+-------------+

| @@server_id |

+-------------+

| 1 |

+-------------+

# 二进制日志格式:

select @@binlog_format;

+-----------------+

| @@binlog_format |

+-----------------+

| ROW |

+-----------------+

# 双一标准之二:

select @@sync_binlog;

+---------------+

| @@sync_binlog |

+---------------+

| 1 |

+---------------+

binlog记录了什么

binlog是SQL层的功能。记录的是变更SQL语句，不记录查询语句。

记录SQL语句种类：

(1) DDL ：原封不动的记录当前DDL(statement语句方式)。

(2) DCL ：原封不动的记录当前DCL(statement语句方式)。

(3) DML ：只记录已经提交的事务DML

DML三种记录方式

binlog_format(binlog的记录格式)参数影响

(1) statement(5.6默认)SBR(statement based replication) ：语句模式原封不动的记录当前DML。

(2) ROW(5.7 默认值) RBR(ROW based replication) ：记录数据行的变化(用户看不懂，需要工具分析)

(3) mixed(混合)MBR(mixed based replication)模式 ：以上两种模式的混合

binlog的记录格式对比：

STATEMENT：可读性较高，日志量少，但是不够严谨，例如：语句中有 now()

ROW ：可读性很低，日志量大，足够严谨

建议使用：row记录模式

event(事件)是什么

事件的简介

二进制日志的最小记录单元

对于DDL,DCL,一个语句就是一个event

对于DML语句来讲:只记录已提交的事务。

例如以下列子,就被分为了4个event

begin; 120 - 340

DML1 340 - 460

DML2 460 - 550

commit; 550 - 760

event的组成

三部分构成:

(1) 事件的开始标识

(2) 事件内容

(3) 事件的结束标识

Position:

开始标识: at 194

结束标识: end_log_pos 254

194? 254?

某个事件在binlog中的相对位置号

位置号的作用是什么？为了方便我们截取事件

日志文件查看

根据 log_bin 参数设置的路径,可以找到二进制日志

show variables like '%log_bin%';

+---------------------------------+--------------------------------+

| Variable_name | Value |

+---------------------------------+--------------------------------+

| log_bin | ON |

| log_bin_basename | /var/lib/mysql/mysql-bin |

| log_bin_index | /var/lib/mysql/mysql-bin.index |

| log_bin_trust_function_creators | OFF |

| log_bin_use_v1_row_events | OFF |

| sql_log_bin | ON |

+---------------------------------+--------------------------------+

查看一共多少个binlog

show binary logs;

+------------------+-----------+

| Log_name | File_size |

+------------------+-----------+

| mysql-bin.000001 | 177 |

| mysql-bin.000002 | 1476 |

| mysql-bin.000003 | 217 |

| mysql-bin.000004 | 376 |

| mysql-bin.000005 | 257 |

| mysql-bin.000006 | 416 |

| mysql-bin.000007 | 257 |

| mysql-bin.000008 | 257 |

| mysql-bin.000009 | 257 |

| mysql-bin.000010 | 257 |

| mysql-bin.000011 | 722 |

| mysql-bin.000012 | 257 |

| mysql-bin.000013 | 1663 |

| mysql-bin.000014 | 257 |

| mysql-bin.000015 | 257 |

| mysql-bin.000016 | 530 |

| mysql-bin.000017 | 530 |

| mysql-bin.000018 | 234 |

+------------------+-----------+

可以使用下面语句来刷新 bin_log 日志

flush logs;

查看mysql正在使用的日志文件

# file：当前MySQL正在使用的文件名

# Position：最后一个事件的结束位置号

show master status;

日志内容查看

event查看

show binlog events in 'mysql-bin.000006';

Log_name： bin_log 文件名

Pos： 开始的position *****

Event_type： 事件类型

Format_desc： 格式描述，每一个日志文件的第一个事件，多用户没有意义，MySQL识别binlog必要信息

Server_id： mysql 服务号标识

End_log_pos： 事件的结束位置号 *****

Info： 事件内容*****

补充:

SHOW BINLOG EVENTS

[IN 'log_name']

[FROM pos]

[LIMIT [offset,] row_count]

eg: mysql -e "show binlog events in 'mysql-bin.000004'" |grep drop

# 获取前 5 条记录

show binlog events in 'mysql-bin.000013' limit 5;

# 从第 5 条记录开始，获取 5 条记录

show binlog events in 'mysql-bin.000013' limit 5,5;

# 从位置 911 开始，获取 3 条记录

show binlog events in 'mysql-bin.000013' from 911 limit 3;

binlog文件内容详细查看

mysqlbinlog /var/lib/mysql/mysql-bin.00001

mysqlbinlog --base64-output=decode-rows -vvv /var/lib/mysql/mysql-bin.00001

# 查看指定库的日志

mysqlbinlog -d klvchen /var/lib/mysql/mysql-bin.00001

# 指定时段查看日志

mysqlbinlog --start-datetime='2019-05-06 17:00:00' --stop-datetime='2019-05-06 17:01:00' /var/lib/mysql/mysql-bin.000001

基于 Position 号进行日志截取

核心就是找截取的起点和终点

--start-position=321

--stop-position=513

mysqlbinlog --start-position=219 --stop-position=1347 /var/lib/mysql/mysql-bin.000013 >/tmp/bin.sql