canal应用四:canal-adapter的使用

本文档介绍了Canal-Adapter的使用,包括适配器结构、配置说明以及如何启动。适配器支持日志、关系型数据库、HBase和Elasticsearch的数据同步。配置文件如application.yml定义了数据消费方式,可以连接Canal Server或通过MQ。通过修改conf/application.yml并启动,可以观察日志查看数据变更。
摘要由CSDN通过智能技术生成

前言

前面的文章,我们都是通过编写Java程序来实现Client消费。Canal 提供了几种适配器,允许我们通过一定的配置实现消费数据并同步到其他存储介质。目前支持功能:

  • 日志适配器
  • 关系型数据库的数据同步(表对表同步), ETL功能
  • HBase的数据同步(表对表同步), ETL功能
  • Elasticsearch的数据同步,ETL功能

Canal-Adapter的消费源,可以使MQ,也可以是直接连Canal-Server,如下图所示:

在这里插入图片描述

适配器结构

client-adapter分为适配器和启动器两部分, 适配器为多个fat jar, 每个适配器会将自己所需的依赖打成一个包, 以SPI的方式让启动器动态加载, 目前所有支持的适配器都放置在plugin目录下

在这里插入图片描述
启动器为 SpringBoot 项目, 支持canal-client启动的同时提供相关

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

°Fuhb

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值