【Canal源码分析】整体架构

本文深入剖析Canal的整体架构,包括一个Canal实例包含的server、instance及其组件。instance模块由eventParser、eventSink和eventStore组成,Parser负责数据解析,Sink处理数据过滤、路由、归并和加工,Store则提供数据存储。同时,讨论了数据1:n和n:1业务场景的处理策略,并介绍了Store的Memory存储机制。
摘要由CSDN通过智能技术生成

本文详解canal的整体架构。

一、整体架构

canal架构图.png

canal架构图2.png

说明:

  • server代表一个canal运行实例,对应于一个jvm
  • instance对应于一个数据队列 (1个server对应1..n个instance)

instance模块:

  • eventParser (数据源接入,模拟slave协议和master进行交互,协议解析)
  • eventSink (Parser和Store链接器,进行数据过滤,加工,分发的工作)
  • eventStore (数据存储)
  • metaManager (增量订阅&消费信息管理器)

二、各模块架构

2.1 Parser

EventParser架构.png

整个pa

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值