构建高可用性的核心服务层：Coupang电子商务应用程序的技术实践

随着Coupang电子商务平台用户数量的快速增长，构建一个高可用性的核心服务层成为了关键任务。本文将介绍Coupang如何通过统一的NoSQL数据存储、缓存层和实时数据流等技术和策略，构建一个高可用性的核心服务层，以满足日益增长的数据流量需求，并保证低延迟和高可靠性的数据服务。

背景和挑战

Coupang作为一个综合性电子商务平台，除了提供市场上的商品，还通过自有的Rocket Delivery服务进行批发和销售。这种服务涉及的业务和数据逻辑比普通电子商务平台更为复杂。每个产品包含多种类型的数据，由不同的微服务进行管理。如果每个页面都直接从微服务中获取数据，微服务需要保持高可用性，并且常用的业务逻辑代码将分散在前端，导致代码冗余和复杂性增加。因此，需要一个单一的微服务来处理常用的业务逻辑和数据。

构建核心服务层

为了应对复杂的数据需求和上述挑战，Coupang的Materialization Platform团队创建了核心服务层。核心服务层有两个主要目标：统一业务逻辑代码和向客户页面提供数据。

核心服务层的目标包括：

•确保99.99%的高可用性，并在发生故障时能够快速恢复。•提供高吞吐量和低延迟的数据服务，以处理高读取流量。•保证从各个来源实时聚合的数据的一致性和新鲜度。•统一业务逻辑代码，减少前端的复杂性和代码冗余。

架构

核心服务层是一个被应用程序的客户页面调用的微服务，用于提供所需的数据和业务逻辑。整个架构的目标是实现高可用性、高吞吐量和低延迟的数据服务。架构包括以下组件和特性：

统一的NoSQL数据存储

Coupang的产品领域信息由后端的不同微服务管理。通过将数据按微服务分离，可以实现高读取吞吐量。核心服务层不需要跟踪所有微服务中的每个数据更新。相反，后端的每个微服务将更新的数据发送到队列，并保存到统一的NoSQL数据库中。通过集成这种统一存储到核心服务

层，可以减少数据读取延迟和提高数据一致性。

缓存层

为了减少对NoSQL存储的访问，核心服务层还实现了一个缓存层。缓存层使用分布式缓存系统（如Redis）来缓存频繁访问的数据，以提高数据读取的性能和响应时间。缓存层与NoSQL存储保持同步，并使用缓存策略和淘汰算法来管理数据的缓存和失效。

实时数据流

核心服务层还包括实时数据流组件，用于处理来自不同来源的数据更新。当后端的微服务更新数据时，它们将数据发送到实时数据流。核心服务层订阅这些数据流，并使用流处理引擎进行实时处理和聚合。这确保了数据的一致性和新鲜度，并使核心服务层能够提供实时的数据更新给客户页面。

高可用性策略

为了确保99.99%的高可用性，核心服务层采用了多个策略。首先，核心服务层使用分布式架构，将服务水平部署到多个服务器上，以避免单点故障。其次，它实现了自动容错和故障转移机制，当一个节点出现故障时，自动将请求路由到其他可用的节点。此外，核心服务层还进行了持续监控和性能优化，以及故障检测和快速恢复。

结论

通过构建高可用性的核心服务层，Coupang电子商务应用程序能够应对日益增长的数据流量需求，并提供低延迟和高可靠性的数据服务。统一的NoSQL数据存储、缓存层和实时数据流等关键技术和策略的应用，使得核心服务层具备了高度的可扩展性、性能和可靠性。这些技术实践为其他电子商务平台构建高可用性的核心服务层提供了有益的参考。

参考文献：

•[1] Coupang: https://www.coupang.com/•[2] Distributed Systems for Fun and Profit: https://www.allthingsdistributed.com/