Maxwell与Canal 工具对比

最新推荐文章于 2024-04-15 18:38:28 发布

☞空白页

最新推荐文章于 2024-04-15 18:38:28 发布

阅读量1.5k

点赞数 1

分类专栏： Canal

本文链接：https://blog.csdn.net/weixin_44441757/article/details/117983203

版权

本文对比分析了Maxwell和Canal两个数据同步工具的优缺点。Maxwell提供历史数据初始化功能，支持断点续传，且日志以影响数据为单位；而Canal具有server+client模式，能自定义数据格式，但处理历史数据有限。在数据格式方面，Maxwell保留原始数据类型，Canal将数字类型转为字符串，并包含表结构信息。

摘要由CSDN通过智能技术生成

Maxwell与Canal 工具对比

1.优缺点对比

Maxwell 没有 Canal那种server+client模式，只有一个server把数据发送到消息队列或redis。
Maxwell 有一个亮点功能，就是Canal只能抓取最新数据，对已存在的历史数据没有办法处理。而Maxwell有一个bootstrap功能，可以直接引导出完整的历史数据用于初始化，非常好用。
Maxwell不能直接支持HA，但是它支持断点还原，即错误解决后重启继续上次点儿读取数据。
Maxwell只支持json格式，而Canal如果用Server+client模式的话，可以自定义格式。
Maxwell比Canal更加轻量级。

2.执行不同操作，Maxwell和canal数据格式对比

2.1.执行insert测试语句

INSERT INTO z_user_info VALUES(30,'zhang3','13810001010'),(31,'li4','1389999999');

canal	maxwell
{"data":[{"id":"30","user_name":"zhang3","tel":"13810001010"},{"id":"31","user_name":"li4","tel":"1389999999"}],"database":"gmall-2020-04","es":1589385314000,"id":2,"isDdl":false,"mysqlType":{"id":"bigint(20)",