使用Canal实现mysql binlog增量订阅数据

前言

是由公司业务改造搜索功能，使用ES搜索引擎中间件，那么我们需要将mysql中的数据同步至ES服务中，最总选择使用alibaba的canal增量订阅和解析工具。

简单原理

• canal模拟mysql slave的交互协议，伪装自己为mysql slave，向mysql master发送dump协议
• mysql master收到dump请求，开始推送binary log给slave(也就是canal)
• canal解析binary log对象(原始为byte流)

实现步骤

1. mysql数据库开启Binlog模式  （ROW 模式（一般就用它））
2. 新建一个mysql账号用于canal连接（不建议使用root账号），并具有作为 MySQL slave 的权限
3. 实现cannal客户端，运行main方法，并查看控制台日志
4. 查看控制台日志，显示为update操作，获取binlog成功

注：在实际生产业务中可把canal逻辑放在定时任务中，定时获取mysql binlog 数据同步