flink-cdc
文章平均质量分 86
矛始
好记性 + 烂笔头
展开
-
【flink】cdc 1.x 分析
是flink的一个数据源,将debezium引擎读取的数据注入到flink系统中,这个过程是生产者-消费者模式,使用该模式是为了兼容全量阶段和增量阶段两种不同行为,其中。,它是通过事务来提供一致性数据视图,同步阶段产生的变更在该事务中不可见,而是在增量阶段消费这些变更日志,所以刚好能做到恰好一次。是debezium默认的内置引擎,独立运行在一个线程,启动了一个连接器任务,并持续从连接器中阻塞地拉取源数据,最后将数据交由。为了一致性数据快照,mysql cdc在同步全量数据过程中一直处于锁表,原创 2023-04-20 22:04:54 · 1587 阅读 · 0 评论 -
【flink 】记一次postgres cdc丢数据
记一次flink postgres cdc丢数据原创 2022-08-22 11:24:50 · 8430 阅读 · 3 评论