java如何基于mysql-binlog-connector 监听mysql binlog日志

现状

当前企业级开发中,基于数据库的binlog日志去做一些联动动作,已经是习以为常的解决方案。
而如何监听binlog日志,发送mq给其他系统,逻辑往往被封装好直供开发者直接使用。

目标

自己写代码实现监听binlog日志(发mq就不写了,之前已经有过实现)

前置

首先需要确保mysql开启了binlog播报功能:
请添加图片描述
当这里显示为ON,就代表当前库已经开启binlog播报了,我这边默认是开启的。
所谓binlog,其实就是数据库系统自己的操作日志。

代码

public class TestBin {
    public static void main(String[] args) {
        BinaryLogClient client = new BinaryLogClient("localhost", 3306, "root", "123456");
        client.setServerId(2);
        client.registerEventListener(event -> {
            EventData data = event.getData();
            System.out.println("data:" + data);
            if (data instanceof TableMapEventData) {
                System.out.println("Table:");
                TableMapEventData tableMapEventData = (TableMapEventData) data;
                System.out.println(tableMapEventData.getTableId() + ": [" + tableMapEventData.getDatabase() + "-" + tableMapEventData.getTable() + "]");
            }
            if (data instanceof UpdateRowsEventData) {
                System.out.println("Update:");
                System.out.println(data.toString());
            } else if (data instanceof WriteRowsEventData) {
                System.out.println("Insert:");
                System.out.println(data.toString());
            } else if (data instanceof DeleteRowsEventData) {
                System.out.println("Delete:");
                System.out.println(data.toString());
            }
        });
        try {
            client.connect();
        } catch (IOException e) {
            e.printStackTrace();
        }

    //    Table:
        //94: [gbstest-user]
        //Insert:
        //WriteRowsEventData{tableId=94, includedColumns={0, 1}, rows=[
        //    [125, eee]
        //]}
        //Table:
        //94: [gbstest-user]
        //Delete:
        //DeleteRowsEventData{tableId=94, includedColumns={0, 1}, rows=[
        //    [123, xiaoming]
        //]}
        //Table:
        //94: [gbstest-user]
        //Update:
        //UpdateRowsEventData{tableId=94, includedColumnsBeforeUpdate={0, 1}, includedColumns={0, 1}, rows=[
        //    {before=[124, abc], after=[126, abc]}
        //]}
        //Table:
        //94: [gbstest-user]
        //Insert:
        //WriteRowsEventData{tableId=94, includedColumns={0, 1}, rows=[
        //    [130, eee]
        //]}
        //Table:
        //94: [gbstest-user]
        //Insert:
        //WriteRowsEventData{tableId=94, includedColumns={0, 1}, rows=[
        //    [131, eee]
        //]}
        //Table:
        //94: [gbstest-user]
        //Insert:
        //WriteRowsEventData{tableId=94, includedColumns={0, 1}, rows=[
        //    [132, eee]
        //]}
        //Table:
        //94: [gbstest-user]
        //Insert:
        //WriteRowsEventData{tableId=94, includedColumns={0, 1}, rows=[
        //    [133, eee]
        //]}
        //Table:
        //94: [gbstest-user]
        //Insert:
        //WriteRowsEventData{tableId=94, includedColumns={0, 1}, rows=[
        //    [134, eee]
        //]}
    }
}

核心代码其实比较短,这里把执行的部分结果也打上去了。

可以看到shyiko这款第三方框架为我们提供了很完整的 java代码连接数据库,解析binlog日志的功能

注册好监听器后,从eventData中读取你需要的内容。
而事实是读取到的eventData内容也不会太复杂(这取决你执行的sql)

这里贴出我执行的sql:

在这里插入图片描述

这里我测试了增删改查四种语句,其中查是不会有binlog的。
也就是binlog只有对数据有改动的操作才会播报。

代码层面也对增删改,做了区分:
在这里插入图片描述
这里只是简单的把binlog打印到控制台,其实后续如果要播报到mq,再做后续消费,也都是一样基于这个监听的EventData!

  • 1
    点赞
  • 18
    收藏
    觉得还不错? 一键收藏
  • 5
    评论
注:下文中的 *** 代表文件名中的组件名称。 # 包含: 中文-英文对照文档:【***-javadoc-API文档-中文(简体)-英语-对照版.zip】 jar包下载地址:【***.jar下载地址(官方地址+国内镜像地址).txt】 Maven依赖:【***.jar Maven依赖信息(可用于项目pom.xml).txt】 Gradle依赖:【***.jar Gradle依赖信息(可用于项目build.gradle).txt】 源代码下载地址:【***-sources.jar下载地址(官方地址+国内镜像地址).txt】 # 本文件关键字: 中文-英文对照文档,中英对照文档,java,jar包,Maven,第三方jar包,组件,开源组件,第三方组件,Gradle,中文API文档,手册,开发手册,使用手册,参考手册 # 使用方法: 解压 【***.jar中文文档.zip】,再解压其中的 【***-javadoc-API文档-中文(简体)版.zip】,双击 【index.html】 文件,即可用浏览器打开、进行查看。 # 特殊说明: ·本文档为人性化翻译,精心制作,请放心使用。 ·本文档为双语同时展示,一行原文、一行译文,可逐行对照,避免了原文/译文来回切换的麻烦; ·有原文可参照,不再担心翻译偏差误导; ·边学技术、边学英语。 ·只翻译了该翻译的内容,如:注释、说明、描述、用法讲解 等; ·不该翻译的内容保持原样,如:类名、方法名、包名、类型、关键字、代码 等。 # 温馨提示: (1)为了防止解压后路径太长导致浏览器无法打开,推荐在解压时选择“解压到当前文件夹”(放心,自带文件夹,文件不会散落一地); (2)有时,一套Java组件会有多个jar,所以在下载前,请仔细阅读本篇描述,以确保这就是你需要的文件;

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值