MySQL 解析binlog 统计DML、长事务与大事务分析工具之my2sql

最新推荐文章于 2025-03-19 10:00:00 发布
最新推荐文章于 2025-03-19 10:00:00 发布
阅读量4.9k 收藏 6
点赞数 4
分类专栏： github 数据库运维平台 mysql 文章标签： github golang mysql linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/liuhanran/article/details/107427391
版权
my2sql是一个基于Golang的MySQL binlog解析工具，能够生成原始SQL、统计DML信息并分析大事务。它支持在Linux上编译安装，并在Zabbix等场景下用于监控和分析。尽管存在如不支持DDL回滚等限制，但因其丰富的功能和快速的解析速度而具有优势。可参考相关博文了解更多。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

my2sql

简介

go版MySQL binlog解析工具，通过解析MySQL binlog ，可以生成原始SQL、回滚SQL、去除主键的INSERT SQL等，也可以生成DML统计信息。https://github.com/liuhr/my2sql

安装

编译

git clone https://github.com/liuhr/my2sql.git
cd my2sql/
go build .

也可以直接下载Linux版编译好的可执行文件
https://github.com/liuhr/my2sql/blob/master/releases/my2sql

应用案例

生成DML统计信息，找到热点表，统计大事务信息
zabbix是常用的监控系统，其底层使用的是mysql做为数据存储，这里以zabbix库为例，查看一段时间DML信息，以及事务信息

./my2sql  -user root -password 123456  -port 3306 \
-databases testdb  -tables student \
-big-trx-row-limit 500 -long-trx-seconds 300 \
-work-type stats   -start-file mysql-bin.000045 \
-start-datetime "2020-07-18 11:40:00" --
最低0.47元/天 解锁文章
MySQL binlog回滚/闪回、前滚、DML统计、长事务与大事务分析之my2sql工具
晨夕的博客
07-18 2322
my2sql简介 go版MySQL binlog解析工具，通过解析MySQL binlog ，可以生成原始SQL、回滚SQL、去除主键的INSERT SQL等，也可以生成DML统计信息。类似工具有binlog2sql、MyFlash、my2fback等。 用途 数据快速回滚(闪回) 主从切换后新master丢数据的修复 从binlog生成标准SQL，带来的衍生功能 生成DML统计信息，可以找到哪些表更新的比较频繁 IO高TPS高， 查出哪些表在频繁更新 找出某个时间点数据库是否有大事务或者长事务 主从延迟
binlog解析工具-my2sql
m0_71902491的博客
06-21 1795
1.my2sql简介my2sql是使用go语言开发的MySQL binlog解析工具，通过解析MySQL binlog ，可以生成原始SQL、回滚SQL、去除主键的INSERT SQL等，也可以生成DML统计信息。类似工具有binlog2sql、MyFlash、my2fback等，本工具基于my2fback、binlog_rollback工具二次开发而来。my2sql的GitHub地址：https://github.com/liuhr/my2sql2.my2sql用途3.产品性能对比。
binlog解析工具—my2sql
雪辉博客
03-15 2440
文章目录一、工具介绍1.1 工具对比1.2 用途1.3 限制1.4 性能对比二、工具使用2.1 参数说明2.2 使用案例 一、工具介绍   my2sql是go版MySQL binlog解析工具，通过解析MySQL binlog ，可以生成原始SQL、回滚SQL、去除主键的INSERT SQL等，也可以生成DML统计信息。类似工具有binlog2sql、MyFlash、my2fback等，本工具基于my2fback、binlog_rollback工具二次开发而来。 1.1 工具对比 binlog2sql：P
MySQL 性能分析神器：Percona Toolkit 与 pt-query-diges
最新发布
03-19 816
在数据库管理中，性能优化是确保系统稳定、高效运行的关键。而对于 MySQL 数据库来说，性能瓶颈可能出现在各个层面，如慢查询、索引设计不当、硬件资源不足等。为了帮助数据库管理员（DBA）和开发人员排查性能问题并优化数据库，Percona 提供了一套强大的工具集 **Percona Toolkit**。
【MySQL工具】my2sql-快速解析binlog
DBA之路的博客
11-29 1471
go版MySQL binlog解析工具，通过解析MySQL binlog ，可以生成原始SQL、回滚SQL、去除主键的INSERT SQL等，也可以生成DML统计信息。类似工具有binlog2sql、MyFlash、my2fback等。
再来介绍另一个binlog文件解析的第三方工具my2sql
SUOYUEのBLOG
10-05 1442
再来介绍另一个binlog文件解析的第三方工具my2sql
my2sql —— go语言版binlog解析及闪回工具
Hehuyi_In的博客
03-20 3956
之前学习过python语言版binlog解析及闪回工具最近听同事介绍有了新的go语言版的my2sql。优点是不需要安装一大堆依赖包，直接可以安装使用，并且解析更高效，试用一下。
统计MySQL binlog中的DML语句
Zhong Weicheng Study Notes
01-31 1507
MASTER@root@test 07:44:52>create table tab02(id int(10) primary key,name varchar(20)); Query OK, 0 rows affected (0.10 sec) MASTER@root@test 08:34:54> MASTER@root@test 08:34:54> MASTER@root@test 08:3
MySQL Binlog Digger 4.28 + Mysql Binlog分析 + 数据库
08-19
MySQL Binlog Digger是一款免费的，且基于图形界面的binlog挖掘分析工具与sql审计工具。当发生误删、误增、误改时，它可以帮助我们从binlog中快速定位到误操作的重做语句(redo sql)，同时推理出回滚语句(undo sql)。...
MySQL 解析binlog生成标准SQL工具之my2sql
晨夕的博客
07-18 8978
my2sql 简介 go版MySQL binlog解析工具，通过解析MySQL binlog ，可以生成原始SQL、回滚SQL、去除主键的INSERT SQL等，也可以生成DML统计信息。https://github.com/liuhr/my2sql 安装 编译 git clone https://github.com/liuhr/my2sql.git cd my2sql/ go build . 也可以直接下载Linux版编译好的可执行文件 https://github.com/liuhr/my2sql/
mysql binlog 统计_对MySQL binlog日志解析，统计每张表的DML次数
weixin_30431137的博客
01-19 637
想要获取每天数据库每张表的DML的次数，统计热度表，可以使用该脚本# coding:utf-8# 解析binlog，统计热度表，表的DML个数import sysimport os# mysqlbinlog解析binlog日志def binlog_output():binlog_file = sys.argv[1]file_num = binlog_file.split('.')[1]binlog...
infobin分析mysql大事务
02-20
infobin分析mysql大事务 ，通过binlog 轻松的找到没有及时提交的事务
MySQL binlog分析DML脚本
雪辉博客
03-14 411
#!/usr/bin/python # -*- coding: utf-8 -*- #python binlog_analyze.py binlog.000008 '2020-03-01 00:00:00' '2022-03-01 00:00:00' import os,sys binlog_name = sys.argv[1] start_datetime = sys.argv[2] stop_datetime = sys.argv[3] binlog_command = "mysqlbinlog --
统计binlog日志中INSERT/UPDATE/DELETE 事件摘要
qq_39899313的博客
12-08 1136
工作中经常会遇到此类需求，如统计binlog中是否存大事物、对事物事件摘要进行统计（事物涉及了那些表表、事物执行时间是什么时候、是更新操作多还是删除操作多），以下awk 脚本，它将使用 mysqlbinlog 输出并从基于行的二进制日志中打印出一个漂亮的 INSERT/UPDATE/DELETE 事件摘要信息摘要脚本。 summarize_binlogs.sh脚本内容： #!/bin/bash BINLOG_FILE="/data/mysql-bin.000473" START_TIME="2021-01
MySQL binlog分析
日薪灬越亿的博客
05-08 358
背景 在MySQL集群环境中需要开启binlog，然后可以在其它节点解析主节点的binlog，写入到当前节点，达到集群环境数据同步的效果。在实际使用场景中经常会出现某条binlog还原失败的情况，同步任务会一直尝试，导致整个mysql集同步任务卡住。我们需要解析binlog找出是哪条sql导致的，然后想办法恢复集群。 操作步骤 1.查看从库状态 show slave status\G Slave_IO_State: Waiting for master to send event ...
MyBatis 操作DML语句及工具类提取
jssd的博客
08-15 491
MyBatis操作DML 配置默认事务处理 我们默认使用JDBC的事务处理模式 <transactionManager type="JDBC"/> 配置mapper中的操作 <insert id="insUser" parameterType="user"> insert into myuser(id, name, register, integral, sex)...
python操作mysql中的表统计_python分析mysql-binlog，统计时间段内各表的操作次数_2016041302...
weixin_39664431的博客
12-17 222
小鹏鹏装逼课堂之：统计指定时间段数据库表的操作次数。×××作，需要大神帮忙优化。bug修复：1、小时位为个位数时，时间显示异常 ----- 已修复#####注：：：以下脚本中路径可能需要各位自行进行修改实现原理： 1、shell脚本：通过mysqlbinlog将binlog日志文件格式化输出 定制crontab任务，定时通过向mysql传递show master status查看...
自研 MySQL Binlog 分析程序介绍
分享既学习
07-20 753
帮研发解决问题时，有一些需要分析Binlog日志的场景，虽然不多，但是都比较重要。本篇文章介绍如何从二进制日志中发现问题。分析是否有大事务；分析是否有长期未提交的会话；分析事务的生成频次；分析表的变更频次；.........
my2sql：高效解析MySQL binlog生成各类SQL及统计信息
- **大事务分析信息**: 对于处理大事务或长事务的情况，my2sql可以分析出是否存在，这在性能调优和系统稳定性分析中非常重要。 #### 3. 工具的用途 - **数据快速回滚（闪回）**: 当数据操作出现错误时，可以使用my2...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值