mysql之binlog日志

最新推荐文章于 2024-05-27 15:50:29 发布
最新推荐文章于 2024-05-27 15:50:29 发布
阅读量3.2k 收藏 9
点赞数 1
分类专栏： mysql 文章标签： java mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46471601/article/details/123334238
版权

binlog日志(binary log)

1.开启mysql的binlog日志

1.1 查看binlog是否开启
mysql> show variables like '%log_bin%';
+---------------------------------+-------+
| Variable_name                   | Value |
+---------------------------------+-------+
| log_bin                         | OFF   |
| log_bin_basename                |       |
| log_bin_index                   |       |
| log_bin_trust_function_creators | OFF   |
| log_bin_use_v1_row_events       | OFF   |
| sql_log_bin                     | ON    |
+---------------------------------+-------+
6 rows in set (0.01 sec)

如果没开启

1.2 编辑my.cnf
vim /etc/my.cnf

增加

#节点Id,注意集群中不能重复,单节点不配置也可以
server-id=123
#开启binlog日志,指定其存放位置
log-bin=/var/lib/mysql/mysql-bin
#开启binlog自动过期
expire_logs_days=3
1.3 重启数据库
service mysqld restart

然后

mysql> show variables like '%log_bin%';
+---------------------------------+--------------------------------+
| Variable_name                   | Value                          |
+---------------------------------+--------------------------------+
| log_bin                         | ON                             |
| log_bin_basename                | /var/lib/mysql/mysql-bin       |
| log_bin_index                   | /var/lib/mysql/mysql-bin.index |
| log_bin_trust_function_creators | OFF                            |
| log_bin_use_v1_row_events       | OFF                            |
| sql_log_bin                     | ON                             |
+---------------------------------+--------------------------------+
6 rows in set (0.00 sec)

发现已开启binlog

/var/lib/mysql/mysql-bin是日志文件

/var/lib/mysql/mysql-bin.index是索引

1.4 查看日志索引和事件位置
mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000004 |      154 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)

mysql-bin是日志文件

000004是索引

pos=154是事件位置也可以叫偏移值

2.binlog的常见命令

2.1 查看所有binlog日志列表
mysql> show master logs;
+------------------+-----------+
| Log_name         | File_size |
+------------------+-----------+
| mysql-bin.000001 |      7083 |
| mysql-bin.000002 |       201 |
| mysql-bin.000003 |       201 |
| mysql-bin.000004 |       467 |
| mysql-bin.000005 |      1218 |
+------------------+-----------+
5 rows in set (0.00 sec)
2.2查看master状态

即最后(最新)一个binlog日志的编号名称，及其最后一个操作事件pos结束点(Position)值

mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000004 |      154 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)
2.3flush刷新log日志，自此刻开始产生一个新编号的binlog日志文件
mysql> show master logs;
+------------------+-----------+
| Log_name         | File_size |
+------------------+-----------+
| mysql-bin.000001 |      7083 |
| mysql-bin.000002 |       201 |
| mysql-bin.000003 |       201 |
| mysql-bin.000004 |       467 |
| mysql-bin.000005 |      1265 |
| mysql-bin.000006 |       154 |
+------------------+-----------+
6 rows in set (0.00 sec)

注意：每当mysqld服务重启时，会自动执行此命令，刷新binlog日志；在mysqldump备份数据时加 -F 选项也会刷新binlog日志；

2.4重置(清空)所有binlog日志

mysql> reset master;

3.查看binlog日志的内容

3.1:使用mysqlbinlog自带查看命令法：

注意：

–>binlog是二进制文件，普通文件查看器cat、more、vim等都无法打开，必须使用自带的mysqlbinlog命令查看

–>binlog日志位置在my.cnf中配置 log-bin=/var/lib/mysql/mysql-bin

–>在MySQL5.5以下版本使用mysqlbinlog命令时如果报错，就加上 “–no-defaults”选项

mysqlbinlog mysql-bin.000004

mysqlbinlog常见的选项有以下几个：

--start-datetime：从二进制日志中读取指定等于时间戳或者晚于本地服务器的时间

--stop-datetime：从二进制日志中读取指定小于时间戳或者等于本地服务器的时间 取值和上述一样

--start-position：从二进制日志中读取指定position 事件位置作为开始。

--stop-position：从二进制日志中读取指定position 事件位置作为事件截至

-vvv 显示sql

-d 指定数据库

mysql二进制日志有三种格式：statement、row、mixed
一般我们在主从复制过程中采用的格式都是mixed。这种格式兼具了基于行（row）和基于语句（statement）的优点，速度和效率是最高的。
但是在使用mysqlbinlog查看混合模式的二进制文件时，基于行的部分默认是以base64编码显示的，那么如何对其进行解码呢，方法如下：

--base64-output=decode-rows

例如

[root@iZ2ze316xjjg0mvije7695Z mysql]# mysqlbinlog mysql-bin.000005  -vvv  --base64-output=decode-rows -v  --start-position 389  --stop-position  485
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
/*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
DELIMITER /*!*/;
# at 389
#220307 10:53:29 server id 1  end_log_pos 420 CRC32 0x63638b44 	Xid = 5568
COMMIT/*!*/;
# at 420
#220307 10:50:21 server id 1  end_log_pos 485 CRC32 0x19318c44 	Anonymous_GTID	last_committed=1	sequence_number=2	rbr_only=yes
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
BEGIN /*added by mysqlbinlog */ /*!*/;
ROLLBACK /* added by mysqlbinlog */ /*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
[root@iZ2ze316xjjg0mvije7695Z mysql]# mysqlbinlog mysql-bin.000005 --start-position 389  --stop-position 485
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
/*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
DELIMITER /*!*/;
# at 4
#220307 10:52:58 server id 1  end_log_pos 123 CRC32 0xed4fb7b6 	Start: binlog v 4, server v 5.7.37-log created 220307 10:52:58
BINLOG '
inMlYg8BAAAAdwAAAHsAAAAAAAQANS43LjM3LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA
AAAAAAAAAAAAAAAAAAAAAAAAEzgNAAgAEgAEBAQEEgAAXwAEGggAAAAICAgCAAAACgoKKioAEjQA
Aba3T+0=
'/*!*/;
# at 389
#220307 10:53:29 server id 1  end_log_pos 420 CRC32 0x63638b44 	Xid = 5568
COMMIT/*!*/;
# at 420
#220307 10:50:21 server id 1  end_log_pos 485 CRC32 0x19318c44 	Anonymous_GTID	last_committed=1	sequence_number=2	rbr_only=yes
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
BEGIN /*added by mysqlbinlog */ /*!*/;
ROLLBACK /* added by mysqlbinlog */ /*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

[root@iZ2ze316xjjg0mvije7695Z mysql]# mysqlbinlog mysql-bin.000005  -vvv  --base64-output=decode-rows  --start-position 389  --stop-position  485
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
/*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
DELIMITER /*!*/;
# at 389
#220307 10:53:29 server id 1  end_log_pos 420 CRC32 0x63638b44 	Xid = 5568
COMMIT/*!*/;
# at 420
#220307 10:50:21 server id 1  end_log_pos 485 CRC32 0x19318c44 	Anonymous_GTID	last_committed=1	sequence_number=2	rbr_only=yes
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
BEGIN /*added by mysqlbinlog */ /*!*/;
ROLLBACK /* added by mysqlbinlog */ /*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

server id 1 :服务器id

end_log_pos 123 :当前事务结束时的pos

3.2 mysqlbinlog读取出binlog日志的全文内容比较多，不容易分辨查看到pos点信息

下面介绍一种更为方便的查询命令：

mysql> show binlog events [IN 'log_name'] [FROM pos] [LIMIT [offset,] row_count];

参数解释：

IN ‘log_name’ ：指定要查询的binlog文件名(不指定就是第一个binlog文件)

FROM pos ：指定从哪个pos起始点开始查起(不指定就是从整个文件首个pos点开始算)

LIMIT [offset,] ：偏移量(不指定就是0)

row_count ：查询总条数(不指定就是所有行)

例1:查询mysql-bin.000001日志
show binlog events
例2:查询mysql-bin.000002日志

\G:可读性好点

show binlog events in 'mysql-bin.000002'\G;
例3:查询mysql-bin.000002日志,从154查起
show binlog events in 'mysql-bin.000002' from 154\G;
例4:查询mysql-bin.000002日志,从154查起,并且 跳过前两个,和sql的limit一样
show binlog events in 'mysql-bin.000002' from 154 limit 2,10\G;
nsnsttn
关注
  • 1
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
运维之道 | mysql-binlog日志说明、备份、恢复数据
VillianTsang 、运维之道
11-23 1064
mysql-binlog日志说明、备份、恢复数据 一、开启binlog日志功能 [root@localhost ~]# vim /etc/my.cnf #`在[mysqld] 区块添加` log-bin=mysql-bin #确认是打开状态(mysql-bin 是日志的基本名或前缀名) #binlog-ignore-db=mysql #忽略数据库(被忽略的数据库中,二进制文件中是无记录的!) ...
mysql的binlog日志
Positvmans的专栏
02-07 478
1.登录mysql数据库查看 show binlog events ：默认查看binlog日志第一个文件; show binlog events in 'mysql-bin.000035'：查看具体的文件 show master status\G：查看正在写入的日志 show binary logs：查看binlog日志列表 2.本地查看 mysqlbinlog
mysql binlog详解
热门推荐
_好人的博客
11-25 4万+
一、初步了解binlog 　　1、MySQL的二进制日志binlog可以说是MySQL最重要的日志，它记录了所有的DDL和DML语句（除了数据查询语句select）,以事件形式记录，还包含语句所执行的消耗的时间，MySQL的二进制日志是事务安全型的。 　　　　a、DDL 　　　　　　----Data Definition Language 数据库定义语言 　　　　　　主要的命令有create、alter、drop等，ddl主要是用在定义或改变表(table)的结构,数据类型，表之间的连接和约束等初.
MySQL重要日志【binlog、redo log、undo log】
最新发布
LuckFairyLuckBaby的博客
05-27 668
MySQL InnoDB 引擎使用redo log(重做日志)保证事务的持久性，使用undo log(回滚日志)来保证事务的原子性。undo log中的历史版本。每个事务读到的数据版本可能是不一样的，在同一个事务中，用户只能看到该事务创建Read View之前已经提交的修改和该事务本身做的修改。
mysql数据库log-bin介绍，开启，查看
weixin_40896800的博客
08-28 2万+
一、binlog日志介绍 1）什么是binlog binlog日志用于记录所有更新了数据或者已经潜在更新了数据（例如，没有匹配任何行的一个DELETE）的所有语句。语句以“事件”的形式保存，它描述数据更改。 2）binlog作用 因为有了数据更新的binlog，所以可以用于实时备份，与master/slave主从复制结合。 3）binlog查看开启状态 首先cmd 选择 数据库  输入账号 ...
binlog数据库恢复技术
StayHungry
02-16 541
binlog数据库恢复binlog 基本认识 MySQL的二进制日志可以说是MySQL最重要的日志了，它记录了所有的DDL和DML(除了数据查询语句)语句，以事件形式记录，还包含语句所执行的消耗的时间，MySQL的二进制日志是事务安全型的。一般来说开启二进制日志大概会有1%的性能损耗(参见MySQL官方中文手册 5.1.24版)。二进制有两个最重要的使用场景: 其一：MySQL Repl
【mysql】binlog日志
王佑辉的博客
04-19 4633
这些情况是NDB引擎，表的增删改的DML操作会以row格式记录、SQL语句里包含UUID()函数、SQL语句里使用了用户定义函数(UDF)、包含了insert delayed语句、使用了临时表、自增字段被更新。1.statement：基于sql语句的日志记录，记录的是sql语句，对数据进行修改的sql都会记录在日志文件中。5.在mysq的配置文件中配置二进制日志的过期时间，设置之后二进制日志过期会自动删除。2.row：基于行的日志记录，记录的是每一行的数据变更，默认是基于行的日志记录。
Mysql 开启bin-log日志
Mark66890620
01-04 1795
登录mysql数据库 mysql -u root -p 然后，输入密码登录 检查日志功能是否开启 show variables like 'log_%'; log_bin为OFF，表明binlog日志未开启 查找mysql的配置文件my.cnf的路径，默认的路径：/etc/my.cnf 编辑 vim /etc/my.cnf，然后按i，在文件[mysqld]加入下面3句，保存退出。（:wq）在[mysqld]下面增加 server-id=1 log-bin=/usr/local/
解说mysql之binlog日志以及利用binlog日志恢复数据的方法
09-09
MySQL的binlog（二进制日志）是数据库系统中不可或缺的一部分，主要用于数据恢复和主从复制。在本文中，我们将深入理解binlog的工作原理、重要性以及如何利用binlog来恢复数据。 首先，binlog是一种记录所有改变...
MySQL读取Binlog日志常见的3种错误
09-09
本篇文章将详细探讨MySQL读取Binlog日志时可能出现的三种错误及其解决办法。 ### 错误1：`mysqlbinlog: [ERROR] unknown variable 'default-character-set=utf8mb4'` 当在`my.cnf`配置文件中设置了`default-...
mysql binlog日志恢复【亲测有效，有例子实测】
03-22
二进制日志（binnary log）以事件形式记录了...主从复制：mysql replication在master端开启binlog,master把它的二进制日志传递给slaves来达到master-slave数据一致的目的。 数据恢复：通过mysqlbinlog工具来恢复数据。
MySQL 自动清理binlog日志的方法
09-09
主要介绍了MySQL 自动清理binlog日志的方法,需要的朋友可以参考下
MySQL Binlog 介绍
03-11 489
Binlog 简介 MySQL中一般有以下几种日志： 日志类型 写入日志的信息 错误日志 记录在启动，运行或停止mysqld时遇到的问题 通用查询日志 记录建立的客户端连接和执行的语句 二进制日志 记录更改数据的语句 中继日志 从复制主服务器接收的数据更改 慢查询日志 记录所有执行时间超过 long_query_time 秒的所有查询或不使用索引的查询 ...
mysql binlog 日志详解
zll4859291的博客
03-20 3847
在下面你将看到 mysqlbinlog --stop-datetime="2019-04-20 9:59:59″ /u01/mysql3308/binlog/mysql-bin.000001 | mysql -u root -pmypwd 类似的语句，这是把mysql-bin.000001这个二进制文件里的内容转换成ASCII文件(也就是sql语句)，直接通过管道操作符”|”传输给 mysql这个程序，然后过滤掉其它数据库的语句，只在db_test里执行。在该行中，从上午10:01登录的SQL语句将运行。
一文读懂MySQL的binLog日志
Java之路艰难，要以高内聚低耦合的目标去设计
12-14 9801
一文读懂MySQL的binLog日志
mysql配置bin log参数_Mysql配置参数sync_binlog说明
weixin_32476639的博客
01-19 649
MySQL提供一个sync_binlog参数来控制数据库的binlog刷到磁盘上去。默认，sync_binlog=0，表示MySQL不控制binlog的刷新，由文件系统自己控制它的缓存的刷新。这时候的性能是最好的，但是风险也是最大的。因为一旦系统Crash，在binlog_cache中的所有binlog信息都会被丢失。如果sync_binlog>0，表示每sync_binlog次事务提交，M...
MySQL的binlog日志详解
happyfly的博客
07-08 3万+
binlog 就是binary log，二进制日志文件，这个文件记录了MySQL所有的DML操作。通过binlog日志我们可以做数据恢复，增量备份，主主复制和主从复制等等。对于开发者可能对binlog并不怎么关注，但是对于运维或者架构人员来讲是非常重要的。 MySQL 5.7这个版本默认是不开启binlog日志的，具体的开启方式可以查看https://blog.csdn.net/king_kgh...
mysql数据库开启log-bin
zwrlj527的专栏
06-24 9924
今天上班老大说接口用不了了，我检查项目运行，发现大片的数据库连接失败，于是检查mysql发现。。。 为了安全起见，终于老大同意讲window server换成linux了。 于是让上次被我逼着搭建本地linux环境的测试小姐姐搭建mysql环境。搞完以后，这得把log-bin打开，不然以后不好恢复。 1、登录MySQL，查看binlog日志的状态 登录MySQL后，输入show...
详解MySQL非常重要的日志—bin log
m0_73311735的博客
11-19 6778
bin log想必大家多多少少都有听过，它是MySQL中一个非常重要的日志，所以各位架构师们，如果有不了解的，一定要好好学习了，因为它涉及到数据库层面的主从复制、高可用等设计。本文讲解了MySQL中的一个非常重要的日志bin log，它主要用来做数据恢复和同步的，所以作为程序员的我们，还是很有必要对它有一个深入的认识。
清理mysql binlog日志的脚本
03-22
以下是一个清理 MySQL binlog 日志的脚本示例： ```bash #!/bin/bash # 设置变量 MYSQL_USER="root" MYSQL_PASSWORD="password" MYSQL_HOST="localhost" MYSQL_PORT="3306" BINLOG_DIR="/var/lib/mysql" BINLOG_PREFIX="mysql-bin" # 获取当前 binlog 文件名 CURRENT_BINLOG=$(mysql -u${MYSQL_USER} -p${MYSQL_PASSWORD} -h${MYSQL_HOST} -P${MYSQL_PORT} -e "SHOW MASTER STATUS\G" | awk '/File:/ {print $2}') # 获取所有 binlog 文件名 ALL_BINLOGS=$(ls ${BINLOG_DIR}/${BINLOG_PREFIX}* | grep -v ${CURRENT_BINLOG}) # 删除旧的 binlog 文件 for BINLOG in ${ALL_BINLOGS}; do rm -f ${BINLOG} done ``` 这个脚本会获取当前正在使用的 binlog 文件名，然后删除所有旧的 binlog 文件。你可以将其保存为一个文件，比如 `clean_binlogs.sh`，然后在命令行中运行它。 注意：在运行脚本之前，请确保你已经备份了所有的 binlog 文件，以防止数据丢失。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值