canal 增量binlog同步
mysql配置 打开 ROW binlog
[mysqld]
log-bin=mysql-bin # 开启 binlog
binlog-format=ROW # 选择 ROW 模式
server_id=10010 # 配置 MySQL replaction 需要定义,不要和 canal 的 slaveId 重复
授权账号
CREATE USER canal IDENTIFIED BY 'canal';
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'canal'@'%';
-- GRANT ALL PRIVILEGES ON *.* TO 'canal'@'%' ;
FLUSH PRIVILEGES;
拉取镜像
docker pull canal/canal-server:v1.1.4
启动canal-server 需要启动mysql 和rocketmq 容器link下同一网络
--正确命令
docker run -p 11111:11111 \
--link=mysql:db \
--link=mqnameserver:mqs \
--name canal-server \
-v/Users/red/docker/canal/conf:/home/admin/canal-server/conf \
-v/Users/red/docker/canal/logs:/home/admin/canal-server/logs \
-e canal.instance.master.address=db:3306 \
-e canal.mq.servers=mqs:9876 \
-d canal/canal-server:v1.1.4
配置文件
##同步到mq
canal.serverMode = RocketMQ
## mq链接
canal.mq.servers = 127.0.0.1:9876
配置 instance.properties
##主库地址
canal.instance.master.address=127.0.0.1:3306
##账号
canal.instance.dbUsername=canal
canal.instance.dbPassword=canal
canal.instance.connectionCharset = UTF-8
# enable druid Decrypt database password
canal.instance.enableDruid=false
## 库名 +表名
canal.instance.filter.regex=red\\.book,red\\.book_1,red\\.book_2
//动态的Topic 单表单Topic
canal.mq.dynamicTopic=book:red\\.book,boo_1:red\\.book_1,book_2:red\\.book_2
这边使用的是单表单Topic的方式、动态的调整Topic。修改mysql的数据、再去看mq就会有记录了