AutoMQ 云原生消息中间件-CSDN博客

本文链接：https://blog.csdn.net/weixin_50830259/article/details/141143900

在当前数字化转型的大潮中，企业对数据处理和传输的需求变得前所未有的迫切。

尤其是在云原生技术迅速崛起的背景下，如何高效、安全地管理和传输海量数据，成了每个技术团队面临的核心挑战。

正是在这样的背景下，AutoMQ 应运而生，作为一款以云原生理念打造的消息中间件，不仅成功地对 Kafka 的存储进行了创新改造，还在成本控制和资源调度方面取得了显著突破，为企业数据管理带来了全新的解决方案。

在这里插入图片描述

AutoMQ 的设计初衷就是在不牺牲性能的前提下，最大限度地降低企业在数据传输方面的成本。

通过将 Kafka 的存储架构云原生化，AutoMQ 将存储从本地磁盘迁移至对象存储，这一改变带来了数据存储的弹性，同时大幅度减少了存储成本。

值得一提的是，AutoMQ 保持了与 Kafka 的 高度兼容性。

对于已经在使用 Kafka 的企业来说，这意味着无需大规模修改现有架构，就能无缝切换到 AutoMQ，并且享受到其带来的优势。无论是从技术的平滑过渡，还是从成本的节约来看，AutoMQ 都展现出了极高的价值。

在这样一个技术日新月异的时代，单一的技术解决方案往往无法满足复杂的企业需求。这就是为什么 CloudCanal 选择与 AutoMQ 合作，通过整合两者的优势，打造出一套更为灵活、高效的数据同步方案。

在这里插入图片描述

CloudCanal 的一大亮点在于它对 Kafka 的全面支持。这种支持不仅仅停留在表面，而是深入到功能语义层面，使得 AutoMQ 的相关链路能够沿用 Kafka 的原有数据管道，实现数据的无缝迁移。

CloudCanal 不仅在技术层面上继承了 Kafka 的优势，更在数据同步链路上展现出了强大的创新能力。目前，CloudCanal 已经实现了多个关键的数据同步链路，
包括：

MySQL -> AutoMQ：从 MySQL 迁移到 AutoMQ 的过程极为顺畅，用户可以轻松享受云原生的便利。
Kafka -> AutoMQ：通过简单的设置，用户可以将现有的 Kafka 数据管道迁移到 AutoMQ，完成技术的升级换代。
AutoMQ -> AutoMQ：这一链路确保了 AutoMQ 集群之间的数据同步，保证数据的实时性和稳定性。此外，CloudCanal 还支持 AutoMQ -> Kafka 和 AutoMQ -> MySQL 的数据流动，未来还将继续拓展更多的链路，以满足用户日益复杂的需求。

为了帮助用户更好地利用 CloudCanal 与 AutoMQ 的整合能力，以下是一个简单的操作指南，帮助您快速上手。

参考 AutoMQ 安装文档在 Docker 上部署 AutoMQ 集群。
将 cloudcanal-sidecar 容器连接到 automq_net 网络。
```
docker network connect automq_net cloudcanal-sidecar
```

登陆 CloudCanal 平台，选择 数据源管理 -> 新增数据源。
将源端 MySQL 和目标端 AutoMQ 分别添加；Docker 创建的 AutoMQ 集群，网络地址填写 broker1:9092 或 broker2:9092。

需要将 cloudcanal-sidecar 容器连接到 automq_net 网络中。
```
docker network connect automq_net cloudcanal-sidecar
```
检查网络地址是否正确，示例中 Docker 创建的 AutoMQ 集群，网络地址填写 broker1:9092 或 broker2:9092。