elasticsearch高级功能之跨集群复制CCR

最新推荐文章于 2024-06-18 07:00:00 发布

北方的_南先生

最新推荐文章于 2024-06-18 07:00:00 发布

阅读量1.1k

点赞数 1

文章标签： elasticsearch 搜索引擎 java 中间件

本文链接：https://blog.csdn.net/qq_41509744/article/details/131708629

版权

CCR的作用(Cross-Cluster Replication，跨集群复制)

CCR功能允许用户在不同的Elasticsearch集群之间同步索引数据。这对于实现跨集群复制、数据备份、灾难恢复和多数据中心部署等场景非常有用。
CCR功能提供了实时的、异步的、可靠的跨集群数据同步，能够有效地将变更事件从一个集群复制到另一个集群。通过CCR，用户可以保持多个集群之间的数据一致性，并实现将数据从生产集群复制到用于查询和分析的目标集群。

常用的场景

1.异地容灾备份：CCR 可以将数据从一个集群复制到另一个位于不同地理位置的集群，实现数据的异地容灾备份。这样，即使源集群发生故障或不可用，目标集群仍能提供服务，保证数据的可用性。

2.跨数据中心复制：当在全球范围内部署 Elasticsearch 集群时，CCR 可以实现跨不同数据中心之间的数据复制，以便在不同地理区域提供快速的访问，减少网络延迟。

3.数据分析和报告：CCR 可以将源集群中的生产数据复制到专门用于数据分析和报告的目标集群中。这样，可以在不影响生产环境的情况下，对数据进行分析、数据挖掘和生成报告。

4.多数据中心协作：对于分布在多个数据中心的不同团队或应用程序，CCR 可以确保他们之间的数据同步。这使得不同的团队或应用程序能够共享和协作处理数据。

5.灾难恢复：CCR 在灾难恢复方面也发挥着重要作用，允许在一个 Elasticsearch 集群发生完全故障时，快速恢复到另一个复制的集群上，确保业务的连续性。

总体上支持单向复制，双向复制，应用容灾等，功能十分强大。

如何使用

具体参照官网：链接: Use cross-cluster replication.
简单来说就是在源端集群创建引导索引（Leader Index)，在目标集群创建跟随索引（Follower Index)，让目标集群索引订阅源端索引并关联源端集群信息，这样当源端索引发生CDC（Change Data Capture），也就是文档的增加、修改、删除时，能快速同步到目标端的各个索引分片上。