TiDB系列之:TiCDC使用Changefeed完成数据同步任务
一、Changefeed
Changefeed 是 TiCDC 中的单个同步任务。Changefeed 将一个 TiDB 集群中数张表的变更数据输出到一个指定的下游。TiCDC 集群可以运行和管理多个 Changefeed。
二、Changefeed 状态流转
同步任务状态标识了同步任务的运行情况。在 TiCDC 运行过程中,同步任务可能会运行出错、手动暂停、恢复,或达到指定的 TargetTs,这些行为都可以导致同步任务状态发生变化。本节描述 TiCDC 同步任务的各状态以及状态之间的流转关系。

以上状态流转图中的状态说明如下:
- Normal:同步任务正常进行,checkpoint-ts 正常推进。处于这个状态的 changefeed 会阻塞 GC 推进。
- Stopped:同步任务停止,由于用户手动暂停 (pause) changefeed。处于这个状态的 changefeed 会阻挡 GC 推进。
- Warning:同步任务报错,由于某些可恢复的错误导致同步无法继续进行。处于这个状态的 changefeed 会不断重试,试图继续

本文详细介绍了 TiCDC 中的 Changefeed 功能,包括 Changefeed 的状态流转、管理操作以及如何通过 cdc cli 和 TiCDC OpenAPI v2 管理同步任务。Changefeed 是 TiCDC 中用于从 TiDB 集群同步数据到下游的工具,支持创建、查询、暂停、恢复、删除等操作。此外,还提到了 TiCDC 对于启用了新 Collation 框架的表和没有有效索引的表的同步支持。
订阅专栏 解锁全文
138

被折叠的 条评论
为什么被折叠?



