m0_60298053的博客

原创 Canal 是否可以实现连接 Kafka 的故障断点消费？Kafka故障问题

在此次实验中，我们通过搭建MySQLCanal和Kafka之间的数据链路，模拟了在 Kafka 崩溃的情况下，Canal是否能够在 Kafka 恢复后，从 MySQL 的 binlog 文件中继续读取并将未同步的数据推送到 Kafka 的能力，即断点续传能力的验证。实验结果：Canal 能够自动记录 binlog 位置：在 Kafka 崩溃期间，Canal 能够继续记录 MySQL 的 binlog 位置，确保 Kafka 恢复后，Canal 可以从崩溃前的位置继续消费数据。