mysql之binlog日志

最新推荐文章于 2024-07-27 13:31:57 发布
最新推荐文章于 2024-07-27 13:31:57 发布
阅读量3.3k 收藏 9
点赞数 1
分类专栏： mysql 文章标签： java mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46471601/article/details/123334238
版权

binlog日志(binary log)

1.开启mysql的binlog日志

1.1 查看binlog是否开启
mysql> show variables like '%log_bin%';
+---------------------------------+-------+
| Variable_name                   | Value |
+---------------------------------+-------+
| log_bin                         | OFF   |
| log_bin_basename                |       |
| log_bin_index                   |       |
| log_bin_trust_function_creators | OFF   |
| log_bin_use_v1_row_events       | OFF   |
| sql_log_bin                     | ON    |
+---------------------------------+-------+
6 rows in set (0.01 sec)

如果没开启

1.2 编辑my.cnf
vim /etc/my.cnf

增加

#节点Id,注意集群中不能重复,单节点不配置也可以
server-id=123
#开启binlog日志,指定其存放位置
log-bin=/var/lib/mysql/mysql-bin
#开启binlog自动过期
expire_logs_days=3
1.3 重启数据库
service mysqld restart

然后

mysql> show variables like '%log_bin%';
+---------------------------------+--------------------------------+
| Variable_name                   | Value                          |
+---------------------------------+--------------------------------+
| log_bin                         | ON                             |
| log_bin_basename                | /var/lib/mysql/mysql-bin       |
| log_bin_index                   | /var/lib/mysql/mysql-bin.index |
| log_bin_trust_function_creators | OFF                            |
| log_bin_use_v1_row_events       | OFF                            |
| sql_log_bin                     | ON                             |
+---------------------------------+--------------------------------+
6 rows in set (0.00 sec)

发现已开启binlog

/var/lib/mysql/mysql-bin是日志文件

/var/lib/mysql/mysql-bin.index是索引

1.4 查看日志索引和事件位置
mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000004 |      154 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)

mysql-bin是日志文件

000004是索引

pos=154是事件位置也可以叫偏移值

2.binlog的常见命令

2.1 查看所有binlog日志列表
mysql> show master logs;
+------------------+-----------+
| Log_name         | File_size |
+------------------+-----------+
| mysql-bin.000001 |      7083 |
| mysql-bin.000002 |       201 |
| mysql-bin.000003 |       201 |
| mysql-bin.000004 |       467 |
| mysql-bin.000005 |      1218 |
+------------------+-----------+
5 rows in set (0.00 sec)
2.2查看master状态

即最后(最新)一个binlog日志的编号名称，及其最后一个操作事件pos结束点(Position)值

mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000004 |      154 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)
2.3flush刷新log日志，自此刻开始产生一个新编号的binlog日志文件
mysql> show master logs;
+------------------+-----------+
| Log_name         | File_size |
+------------------+-----------+
| mysql-bin.000001 |      7083 |
| mysql-bin.000002 |       201 |
| mysql-bin.000003 |       201 |
| mysql-bin.000004 |       467 |
| mysql-bin.000005 |      1265 |
| mysql-bin.000006 |       154 |
+------------------+-----------+
6 rows in set (0.00 sec)

注意：每当mysqld服务重启时，会自动执行此命令，刷新binlog日志；在mysqldump备份数据时加 -F 选项也会刷新binlog日志；

2.4重置(清空)所有binlog日志

mysql> reset master;

3.查看binlog日志的内容

3.1:使用mysqlbinlog自带查看命令法：

注意：

–>binlog是二进制文件，普通文件查看器cat、more、vim等都无法打开，必须使用自带的mysqlbinlog命令查看

–>binlog日志位置在my.cnf中配置 log-bin=/var/lib/mysql/mysql-bin

–>在MySQL5.5以下版本使用mysqlbinlog命令时如果报错，就加上 “–no-defaults”选项

mysqlbinlog mysql-bin.000004

mysqlbinlog常见的选项有以下几个：

--start-datetime：从二进制日志中读取指定等于时间戳或者晚于本地服务器的时间

--stop-datetime：从二进制日志中读取指定小于时间戳或者等于本地服务器的时间 取值和上述一样

--start-position：从二进制日志中读取指定position 事件位置作为开始。

--stop-position：从二进制日志中读取指定position 事件位置作为事件截至

-vvv 显示sql

-d 指定数据库

mysql二进制日志有三种格式：statement、row、mixed
一般我们在主从复制过程中采用的格式都是mixed。这种格式兼具了基于行（row）和基于语句（statement）的优点，速度和效率是最高的。
但是在使用mysqlbinlog查看混合模式的二进制文件时，基于行的部分默认是以base64编码显示的，那么如何对其进行解码呢，方法如下：

--base64-output=decode-rows

例如

[root@iZ2ze316xjjg0mvije7695Z mysql]# mysqlbinlog mysql-bin.000005  -vvv  --base64-output=decode-rows -v  --start-position 389  --stop-position  485
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
/*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
DELIMITER /*!*/;
# at 389
#220307 10:53:29 server id 1  end_log_pos 420 CRC32 0x63638b44 	Xid = 5568
COMMIT/*!*/;
# at 420
#220307 10:50:21 server id 1  end_log_pos 485 CRC32 0x19318c44 	Anonymous_GTID	last_committed=1	sequence_number=2	rbr_only=yes
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
BEGIN /*added by mysqlbinlog */ /*!*/;
ROLLBACK /* added by mysqlbinlog */ /*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
[root@iZ2ze316xjjg0mvije7695Z mysql]# mysqlbinlog mysql-bin.000005 --start-position 389  --stop-position 485
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
/*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
DELIMITER /*!*/;
# at 4
#220307 10:52:58 server id 1  end_log_pos 123 CRC32 0xed4fb7b6 	Start: binlog v 4, server v 5.7.37-log created 220307 10:52:58
BINLOG '
inMlYg8BAAAAdwAAAHsAAAAAAAQANS43LjM3LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA
AAAAAAAAAAAAAAAAAAAAAAAAEzgNAAgAEgAEBAQEEgAAXwAEGggAAAAICAgCAAAACgoKKioAEjQA
Aba3T+0=
'/*!*/;
# at 389
#220307 10:53:29 server id 1  end_log_pos 420 CRC32 0x63638b44 	Xid = 5568
COMMIT/*!*/;
# at 420
#220307 10:50:21 server id 1  end_log_pos 485 CRC32 0x19318c44 	Anonymous_GTID	last_committed=1	sequence_number=2	rbr_only=yes
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
BEGIN /*added by mysqlbinlog */ /*!*/;
ROLLBACK /* added by mysqlbinlog */ /*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

[root@iZ2ze316xjjg0mvije7695Z mysql]# mysqlbinlog mysql-bin.000005  -vvv  --base64-output=decode-rows  --start-position 389  --stop-position  485
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
/*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
DELIMITER /*!*/;
# at 389
#220307 10:53:29 server id 1  end_log_pos 420 CRC32 0x63638b44 	Xid = 5568
COMMIT/*!*/;
# at 420
#220307 10:50:21 server id 1  end_log_pos 485 CRC32 0x19318c44 	Anonymous_GTID	last_committed=1	sequence_number=2	rbr_only=yes
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
BEGIN /*added by mysqlbinlog */ /*!*/;
ROLLBACK /* added by mysqlbinlog */ /*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

server id 1 :服务器id

end_log_pos 123 :当前事务结束时的pos

3.2 mysqlbinlog读取出binlog日志的全文内容比较多，不容易分辨查看到pos点信息

下面介绍一种更为方便的查询命令：

mysql> show binlog events [IN 'log_name'] [FROM pos] [LIMIT [offset,] row_count];

参数解释：

IN ‘log_name’ ：指定要查询的binlog文件名(不指定就是第一个binlog文件)

FROM pos ：指定从哪个pos起始点开始查起(不指定就是从整个文件首个pos点开始算)

LIMIT [offset,] ：偏移量(不指定就是0)

row_count ：查询总条数(不指定就是所有行)

例1:查询mysql-bin.000001日志
show binlog events
例2:查询mysql-bin.000002日志

\G:可读性好点

show binlog events in 'mysql-bin.000002'\G;
例3:查询mysql-bin.000002日志,从154查起
show binlog events in 'mysql-bin.000002' from 154\G;
例4:查询mysql-bin.000002日志,从154查起,并且 跳过前两个,和sql的limit一样
show binlog events in 'mysql-bin.000002' from 154 limit 2,10\G;
nsnsttn
关注
  • 1
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
运维之道 | mysql-binlog日志说明、备份、恢复数据
VillianTsang 、运维之道
11-23 1084
mysql-binlog日志说明、备份、恢复数据 一、开启binlog日志功能 [root@localhost ~]# vim /etc/my.cnf #`在[mysqld] 区块添加` log-bin=mysql-bin #确认是打开状态(mysql-bin 是日志的基本名或前缀名) #binlog-ignore-db=mysql #忽略数据库(被忽略的数据库中,二进制文件中是无记录的!) ...
解说mysql之binlog日志以及利用binlog日志恢复数据的方法
09-09
MySQL的binlog（二进制日志）是数据库系统中不可或缺的一部分，主要用于数据恢复和主从复制。在本文中，我们将深入理解binlog的工作原理、重要性以及如何利用binlog来恢复数据。 首先，binlog是一种记录所有改变...
Mysql日志---binlog
m0_53157173的博客
12-01 7042
MySQL中到底有多少种log？你是否经常听别人说什么binlog、binary log、redo log、undo log、回滚日志、重做日志、中继日志、错误日志、慢查询日志、一般日志等等。这些概念都分别是什么？MySQL生成这些日志的目的都是什么？接下来我们一起来分析一下MySQL中到底有哪些log吧。MySQL中经常遇到的日有以下几种：接下来，我们一个一个分别了解一下它们。今天这篇文章主要是分析一些binlog日志，其他的日志会在后续的文章中逐个分析。binlog是大家学习MySQL中经常遇到的，也是
MySQL重要日志【binlog、redo log、undo log】
LuckFairyLuckBaby的博客
05-27 684
MySQL InnoDB 引擎使用redo log(重做日志)保证事务的持久性，使用undo log(回滚日志)来保证事务的原子性。undo log中的历史版本。每个事务读到的数据版本可能是不一样的，在同一个事务中，用户只能看到该事务创建Read View之前已经提交的修改和该事务本身做的修改。
MySQL之binlog日志
Deep Water Slow
07-08 796
binlog 是什么 binlog 配置和查看 binlog 的类型 binlog 如何恢复数据 binlog 是逻辑日志还是物理日志 binlog 作用
Mysql之binlog日志浅析
月生的静心苑
08-01 4833
MySQL的binlog日志有三种格式，分别是Statement格式、Row格式和Mixed格式。Statement格式Statement格式是最简单的binlog格式，记录的是执行的SQL语句，可以通过解析SQL语句来恢复数据。这种格式的优点是简单、易于理解和分析，缺点是可能会出现数据不一致的情况，因为同一个SQL语句在不同的环境下可能会产生不同的结果。Row格式Row格式是记录每一行数据的变化，包括插入、删除和更新操作。
MySQL之binlog归档日志
qq_36211262的博客
04-21 981
的话题，假设我们把数据库所有数据都删除了要怎么恢复了，如果数据库之前没有备份，所有的binlog日志都在的话，就从binlog第一个文件开始逐个恢复每个binlog文件里的数据，这种一般不太可能，因为binlog日志比较大，早期的binlog文件会定期删除的，所以一般不可能用binlog文件恢复整个数据库的。设置sync_binlog为1意味着每个事务的binlog信息在提交时都会立即通过fsync操作被刷新到磁盘，确保了数据的持久性和一致性，但这可能对性能产生影响，特别是在高事务率的系统中。
mysql清理binlog日志
weixin_44416039的博客
05-31 374
MySQL提供了一个命令行工具mysqlbinlog，可以用于管理和操作Binlog日志。通过该工具，可以清空或删除Binlog日志文件。修改MySQL的配置文件my.cnf。通过修改配置文件的方式，可以永久性地清空Binlog日志。2.该配置项的意思是设置Binlog日志的过期时间为0天，即立即删除过期的Binlog日志。使用如show binary logs下命令查看当前的Binlog日志文件。1.在配置文件中找到[mysqld]部分，在该部分下添加如下配置项。打开MySQL的配置文件my.cnf。
清理mysql的binlog日志
Fairy的博客
02-21 1195
下面介绍三种方式，可以根据相应的场景使用。
mysql查看binlog日志
weixin_67271870的博客
09-14 4992
/从第6条开始，查询10条数据。7、查询指定 mysql-bin.000002 这个文件，从pos点:2225开始查起，ps：此pos应为真实存在的。2、查询是否启用了日志，on=启用，off=未启用。6、查看指定binlog文件的内容。
MySQL binlog日志清理方案
z17806289513的博客
08-22 5034
MySQL binlog日志清理方案
MySQL读取Binlog日志常见的3种错误
09-09
本篇文章将详细探讨MySQL读取Binlog日志时可能出现的三种错误及其解决办法。 ### 错误1：`mysqlbinlog: [ERROR] unknown variable 'default-character-set=utf8mb4'` 当在`my.cnf`配置文件中设置了`default-...
mysql binlog日志恢复【亲测有效，有例子实测】
03-22
1. **开启binlog日志**：编辑配置文件`/etc/my.cnf`，在[mysqld]段落中添加如下配置： ``` server_id = 1 log_bin = mysql-bin expire_logs_days = 180 max_binlog_size = 500M binlog_format = ROW binlog-...
MySQL 自动清理binlog日志的方法
09-09
主要介绍了MySQL 自动清理binlog日志的方法,需要的朋友可以参考下
golang 接口
m0_70982551的博客
07-24 945
接口定义了一组方法，这些方法没有具体的实现。接口类型的变量可以存储任何实现了这些方法的类型的值。// 更多方法...在Go语言中，接口值是指存储了实现某个接口的具体类型值的变量。接口值由两部分组成：1.动态类型：这是接口值当前存储的实际类型。2.动态值：这是实际存储的值，该值必须实现了接口中定义的所有方法。
Swagger使用Map接受参数时，页面如何显示具体参数及说
a1058926697的博客
07-26 513
后端使用Map接受参数，要求在swagger页面上显示具体的参数名称、类型及说明。当Map接受参数数量少时，可以使用Swagger自带的注解。自定义注解 @ApiGlobalModel。编写处理注解对应的插件。
springboot之自动装配
weixin_50153914的博客
07-23 636
Spring Boot 通过一系列注解和条件配置实现了自动装配机制，使得开发者无需手动配置大量的 XML 文件或 Java 配置类。自动配置机制利用文件中的自动配置类，并结合条件注解和组件扫描，实现了灵活且强大的自动装配功能。这样，开发者可以专注于业务逻辑的实现，而无需处理繁琐的配置细节。
Java的@DateTimeFormat注解与@JsonFormat注解的使用对比
最新发布
訾博（ZiBo）的博客
07-27 592
在Spring和Jackson框架中，日期和时间格式化是一个常见需求。注解主要用于Spring的表单绑定，而注解则用于Jackson的JSON序列化和反序列化。了解这两个注解的使用场景和方法，可以帮助开发者更高效地处理日期和时间。和是处理日期和时间格式化的两个重要注解。主要用于Spring MVC的请求参数绑定，而主要用于Jackson的JSON序列化和反序列化。了解它们的使用场景和功能，可以帮助开发者更高效地处理日期和时间格式化需求。通过本文的介绍，希望读者能够更清晰地理解和。
清理mysql binlog日志的脚本
03-22
以下是一个清理 MySQL binlog 日志的脚本示例： ```bash #!/bin/bash # 设置变量 MYSQL_USER="root" MYSQL_PASSWORD="password" MYSQL_HOST="localhost" MYSQL_PORT="3306" BINLOG_DIR="/var/lib/mysql" BINLOG_PREFIX="mysql-bin" # 获取当前 binlog 文件名 CURRENT_BINLOG=$(mysql -u${MYSQL_USER} -p${MYSQL_PASSWORD} -h${MYSQL_HOST} -P${MYSQL_PORT} -e "SHOW MASTER STATUS\G" | awk '/File:/ {print $2}') # 获取所有 binlog 文件名 ALL_BINLOGS=$(ls ${BINLOG_DIR}/${BINLOG_PREFIX}* | grep -v ${CURRENT_BINLOG}) # 删除旧的 binlog 文件 for BINLOG in ${ALL_BINLOGS}; do rm -f ${BINLOG} done ``` 这个脚本会获取当前正在使用的 binlog 文件名，然后删除所有旧的 binlog 文件。你可以将其保存为一个文件，比如 `clean_binlogs.sh`，然后在命令行中运行它。 注意：在运行脚本之前，请确保你已经备份了所有的 binlog 文件，以防止数据丢失。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值