搭建canal并对接RabbitMQ

搭建canal并对接RabbitMQ

canal是非常好用的mysql数据增量同步工具

安装其实按照官方文档就可以了，看其他博客，难免会有差错，只会徒增不必要的时间

官方安装文档地址：QuickStart · alibaba/canal Wiki (github.com)

目标

1. 准备工作(配置mysql、新建canal用户)
2. 安装canal
3. 配置canal
4. 运行canal
5. 观察canal成功接入RabbitMQ

按部就班执行

准备工作

• 对于自建 MySQL , 需要先开启 Binlog 写入功能，配置 binlog-format 为 ROW 模式，my.cnf 中配置如下

  [mysqld]
  log-bin=mysql-bin # 开启 binlog
  binlog-format=ROW # 选择 ROW 模式
  server_id=1 # 配置 MySQL replaction 需要定义，不要和 canal 的 slaveId 重复

  • 注意：针对阿里云 RDS for MySQL , 默认打开了 binlog , 并且账号默认具有 binlog dump 权限 , 不需要任何权限或者 binlog 设置,可以直接跳过这一步

• 授权 canal 链接 MySQL 账号具有作为 MySQL slave 的权限, 如果已有账户可直接 grant

  CREATE USER canal IDENTIFIED BY 'canal';  
  GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'canal'@'%';
  -- GRANT ALL PRIVILEGES ON *.* TO 'canal'@'%' ;
  FLUSH PRIVILEGES;

安装canal

• 下载 canal, 访问