使用canal监控数据库

1 canal简介

1.canal可以用来监控数据库数据的变化，从而获得新增数据，或者修改的数据。
2. canal是应阿里巴巴存在杭州和美国的双机房部署，存在跨机房同步的业务需求而提出的
3.阿里系公司开始逐步的尝试基于数据库的日志解析，获取增量变更进行同步，由此衍生出了增量订阅&消费的业务。

原理相对比较简单：

1. canal模拟mysql slave的交互协议，伪装自己为mysql slave，向mysql master发送dump协议
2. mysql master收到dump请求，开始推送binary log给slave(也就是canal)
3. canal解析binary log对象(原始为byte流)

使用canal之前先要开启mysql的binlog日志，然后在进行canal服务端安装配置

canal的使用步骤

我们这里使用的一个开源的项目，它实现了springboot与canal的集成。比原生的canal更加优雅。canal开源项目

1. 在自己工程中导入canal依赖

<dependency>
	<groupId>com.xpand</groupId>
	<artifactId>starter-canal</artifactId>
	<version>0.0.1-SNAPSHOT</version>
</dependency>

2. 创建包com.canal ，包下创建启动类

@SpringBootApplication
@EnableCanalClient //声明当前的服务是canal的客户端
public class CanalApplication {
  public static void main(String[] args) {
    SpringApplication.run(CanalApplication.class,args);
 }
}

3.添加配置文件application.properties

canal.client.instances.example.host=127.0.0.1
canal.client.instances.example.port=11111
canal.client.instances.example.batchSize=1000

4.创建com.canal.listener包，包下创建类

@CanalEventListener //声明当前的类是canal的监听类
public class BusinessListener {
  @Autowired
  private RabbitTemplate rabbitTemplate;
  /**
  *
  * @param eventType 当前操作数据库的类型
  * @param rowData 当前操作数据库的数据
  */
  @ListenPoint(schema = "changgou_business",table = "tb_ad")
  public void adUpdate(CanalEntry.EventType eventType,CanalEntry.RowData
rowData){
    System.out.println("广告表数据发生改变");
    //获取改变之前的数据
    rowData.getBeforeColumnsList().forEach((c)-> System.out.println("改变前的
数据:"+c.getName()+"::"+c.getValue()));
    //获取改变之后的数据
    rowData.getAfterColumnsList().forEach((c)-> System.out.println("改变之后的
数据:"+c.getName()+"::"+c.getValue()));
 }
}

测试：启动数据监控微服务，修改 changgou_business的tb_ad表，观察控制台输出。