Canal
文章平均质量分 88
☞空白页
这个作者很懒,什么都没留下…
展开
-
Maxwell与Canal 工具对比
Maxwell与Canal 工具对比 1.优缺点对比 Maxwell 没有 Canal那种server+client模式,只有一个server把数据发送到消息队列或redis。 Maxwell 有一个亮点功能,就是Canal只能抓取最新数据,对已存在的历史数据没有办法处理。而Maxwell有一个bootstrap功能,可以直接引导出完整的历史数据用于初始化,非常好用。 Maxwell不能直接支持HA,但是它支持断点还原,即错误解决后重启继续上次点儿读取数据。 Maxwell只支持json格式,而C原创 2021-06-17 10:15:22 · 1555 阅读 · 0 评论 -
基于 Canal 和 Kafka 实现 MySQL 的 Binlog 近实时同步
前提 近段时间,业务系统架构基本完备,数据层面的建设比较薄弱,因为笔者目前工作重心在于搭建一个小型的数据平台。优先级比较高的一个任务就是需要近实时同步业务系统的数据(包括保存、更新或者软删除)到一个另一个数据源,持久化之前需要清洗数据并且构建一个相对合理的便于后续业务数据统计、标签系统构建等扩展功能的数据模型。基于当前团队的资源和能力,优先调研了Alibaba开源中间件Canal的使用。 这篇文章简单介绍一下如何快速地搭建一套Canal相关的组件。 关于Canal 简介 下面的简介和下一.原创 2020-11-11 10:19:26 · 246 阅读 · 0 评论