【Canal】之 一些坑

前言

记录一些遇到的问题




(1)Mixed模式不能通过filter进行过滤


问题来源

在 Mixed 模式下,通过 canal 解析 Binlog 获得 SQL 语句,再到另个数据库中去执行这个SQL。

问题出现

在单机和一个instance下,SQL 执行了两次,程序抛出异常。

出现这问题的可能原因

同时监听了这两个数据库,导致执行一次触发一次

1. 通过设置白名单(subscribe)、黑名单

行不通

因为在 Mixed 模式下,filter将失效,因为不解析sql,所以无法准确提取tableName进行过滤 资料参考


2. 业务逻辑判断

既然不能通过设置filter来判断,那就自己写逻辑。

根据上个问题,我们知道在 Mixed 模式下 无法准确提取 tableName,那么就根据 数据库名(schemaName)来判断。
这里写图片描述




(2)canal 指定 timestamp


当然这些工作,你得先停止 canal ./stop.sh

每修改完 instance.properties ,请删除 meta.dat

因为canal启动后可能先去读取 meta.dat 中 position 的位置,然后在当前位置往下读
这里写图片描述

只看了阿里简介,没详细看源码,so,这些是我的猜想

在看一下阿里的 EventParser 设计图
这里写图片描述

我的 instance.properties 配置
这里写图片描述

  • 2
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值