浅谈CDC在微服务中的应用

CDC(Change Data Capture)是一种通过监测数据变更（变更包括新增、修改、删除等）而对变更的数据进行进一步处理的一种设计模式，通常应用在数据仓库以及和数据库密切相关的一些应用上，比如数据同步、备份、审计、ETL等。实际上，早在二十多年前，CDC就已经用来将应用系统的数据变更实时发送到数据仓库，进一步转换后传递到数据分析系统，这样能够在极小地影响生产的情况下，有效而及时地将数据传递到消费方。而在微服务架构逐渐流行的今天，这种古老的技术是否能够焕发新的生机？

1.CDC实现原理

在说CDC在微服务中的应用之前，我们有必要先了解一下CDC的基本原理。

关键也许就在如何监测数据的变更。拿MySQL来说，我们知道MySQL中有binlog(binary log)可以记录用户对数据库进行的修改事件，顺理成章，一个最简单高效的CDC实现就可以利用binlog来完成。当然现在已经有很多开源的MySQL CDC实现，开箱即用。使用binlog并不是实现CDC的唯一途径（至少对于MySQL而言），甚至利用数据库触发器也能完成类似的功能，但从效率上以及对数据库影响的层面来看可能就相形见绌了。

通常而言，CDC捕获到数据库的变更之后，会将变更事件发布到消息队列中供消费者消费，例如Debezium，将MySQL（也支持PostgreSQL、Mongo等）的变更持久化到Kafka中，通过订阅Kafka中的事件，就可以得到变更的内容，实现我们需要的功能。

2.微服务解耦

我们刚才已经了解到，通过CDC可以把数据库的变更转变为各个“事件”，从而可以以“只关心这些事件”的方式来处理。对于传统的大型单体应用，可以通过这种方式来进行解耦，进而拆分成微服务出来。