《微服务架构设计模式》的一点总结

经常翻阅微服务材料的话,总会碰到 microservices.io 这个网站,总结了微服务方方面面的设计模式。网站的作者是 Chris Richardson。

这些相关的经验在 2018 年成为了《微服务架构设计模式》这本书,并且 2019 年引进国内。当时我第一时间购入了这本书,中间断断续续地一直没看完。最近准备分享内容的时候又翻起这本书,这次完整地读完了一遍。感觉应该是目前微服 务领域最好的一本书了。另一本《Building Microservices》也不错,不过内容还是稍微单薄了一些。

这本书为我们提供了宏观上俯瞰微服务整个生态的大图,比如:

当然,18 年的时候,service mesh 之类的东西还没有太火,所以后来在网站上有个更新的版本:

个人很喜欢这种大图,不管什么领域,我只要照着图去一点一点填坑就行了,没有这样的图,总觉得是在望不见头的技术森林里兜兜转转,找不到北。

下面简单写一写我对这本书的总结,里面 saga 和测试的部分我就先省略了。

单体服务的困境

在单体时代,大家在一个仓库里开发,代码冲突解决起来很麻烦,上线的 CI/CD pipeline 也是等待到死。

拆分了以后,至少大家有各自的代码库,各自的上线流程,各自的线上服务。这样上线不打架了,上线以后也可以自己玩自己的灰度流程,一般不会互相影响。

服务拆分

虽然说是拆了,不过拆分也是要讲究方法的。

书里提供了两种思路,一种是按照业务/商业能力拆分,一种是按照 DDD 中的 sub domain 拆分。

  • 供应商管理

    • 送餐员信息管理

    • 餐馆信息管理:管理餐馆的订单、营业时间、营业地点

  • 消费者管理

    • 管理消费者信息

  • 订单获取和履行

    • 消费者订单管理:让消费者可以创建、管理订单

    • 餐馆订单管理:让餐馆可以管理订单的准备过程

  • 送餐管理

    • 送餐员状态管理:管理可以进行接单操作的送餐员的实时状态

    • 配送管理:订单配送追踪

  • 会计

    • 消费者记账:管理消费者的订单记录

    • 餐馆记账:管理餐馆的支付记录

    • 配送员记账:管理配送员的收入信息

最终大概会形成上面这些服务。

用 DDD 来做分析,其实我们得到的结果也差不多:

在拆分时,我们还应该用 SOLID 中的 SRP 原则和另外一个闭包原则 CCP(common closure principle) 来进行指导。

在拆分后,也要注意微服务的拆分会额外给我们带来的问题:

  • 网络延迟

  • 服务间同步通信导致可用性降低

  • 在服务间维持数据一致性

  • 获取一致的数据视图

  • 阻塞拆分的上帝类

服务集成

分布式服务通信大概可以分为 one-to-one 和 one-to-many:

RPC 很好理解,同步的 request/response。异步通信,一种是回调式的 request/response,一种是一对多的 pub/sub。

具体到 RPC 的话,可以使用多种协议和框架:

不过当 API 更新时,应该遵循 semver 的规范进行更新。社区里 gRPC 很多次更新都没有遵守 semver,给它的依赖方都造成了不小的麻烦。感兴趣的同学应该可以搜到一些相关的事件。

不得不说 Google 的程序员也并不是事事靠谱。

RPC 进行服务集成的时候,要注意不要被某些不稳定的服务慢响应拖死,要注意设置超时,熔断。

服务与服务之间要能找得到彼此,有两种方式,一种是基于服务注册中心的服务发现。

一种是基于 dns 的服务发现。基于 DNS 的现在应该不太多了。

除了 RPC 以外,还可以使用消息来进行服务间的集成。

使用 MQ 也可以模拟 RPC 的 request/response,不过这样会使你的服务强依赖于 MQ,如果 MQ 故障,那整个系统随之崩溃。

一般我们使用的是 broker-based mq 通信,但也有无 broker 的异步通信,书中这里举了个 ZeroMQ 的例子,之前个人不是很了解,需要再调研一下。

Event Sourcing

event sourcing 是一种特殊的设计模式,不记录实体的终态,而是记录所有状态修改的事件。然后通过对事件进行计算来得到实体最终的状态。

但这样事件累积太多以后会有性能问题,所以可以对一部分历史数据进行计算,得到一个中间的快照,之后的计算在快照的基础上再叠加。

看起来方案很酷,我们在实际工作中也确实在一些下游的计算逻辑中使用过这种设计模式,不过它也是有缺陷的:

  • 事件本身结构变化时,新老版本兼容比较难做

  • 如果代码中要同时处理新老版本数据,那么升级几次后会非常难维护

  • 因为容易追溯,所以删除数据变得非常麻烦,GDPR 类的法规要求用户注销时必须将历史数据删除干净,这对 Event Sourcing 是一个巨大的挑战

在使用异步消息来做解耦的时候,我们也会遇到一些实际的业务问题:

  • 这个数据我需要,你能不能在消息里帮我透传一下

  • 你重构的时候怎么把这个字段删了,我还要用呢

  • 你们原来的状态机变更都有 event,本来有三个,怎么现在变成两个了?

  • 你们 API 故障的时候,怎么消息顺序乱了?

这要求我们能有对上游的领域事件进行校验的系统,这里可以参考 Google 的 schema validation 这个项目,之前我在 《MQ 正在变成臭水沟》一文中有详述。这里就不提了。

查询模式

很多查询逻辑其实就是进行 API 的数据组合,这个涉及到需要组合数据的 API 组合器,和数据提供方:

  • API 组合器:通过查询数据提供方的服务实现查询操作

  • 数据提供方:提供数据

虽然看起来挺简单,写代码的时候,下面这些问题还是难处理:

  • 谁来负责拼装这些数据?有时是应用,有时是外部的 API Gateway,难以定立统一的标准,在公司里也经常扯皮

  • 增加额外的开销-一个请求要查询很多接口

  • 可用性降低-每个服务可用性 99.5%,实际接口可能是 99.5^5=97.5

  • 事务数据一致性难保障-需要使用分布式事务框架/使用事务消息和幂等消费

CQRS

业务开发经常自嘲是 CRUD 工程师,在架构设计里,CRUD 的 R 可以单独拆出来,像下面这样。

拆出来的好处?互联网大多是写少读多的服务,将关注点分离之后,读服务和写服务的存储可以做异构。

比如写可以是 MySQL,而读则可以是各种非常容易做横向扩展的 NoSQL。碰到检索需求,读还可以是 Elasticsearch。

读服务可以订阅写服务的 domain event,也可以是 MySQL 的 binlog。

在消费上游数据时,需要根据业务逻辑去判断有些状态机要怎么做处理。这里其实数据上是有耦合的,并不是放个 MQ 和 domain event 就能解耦干净了。

CQRS 的缺点也比较明显:

  • 架构复杂

  • 数据复制延迟问题

  • 查询一致性问题

  • 并发更新问题处理

  • 幂等问题需要处理

外部 API 模式

现在的互联网公司一般客户端都是多端,web、移动、向第三方开放的 open API。

如果我们直接把之前用拆分方法拆出来的这些内部 API 开放出去,那未来内部的 API 想升级就会非常非常地麻烦。

在单体时代,客户端走弱网 internet,只需要一次调用。微服务化以后,如果不做任何优化,那在 internet 这种慢速网络上就需要有多次调用。

这就是我们为什么需要中间有一个 API Gateway 的原因。

有了 Gateway 之后,在 internet 依然还是一次调用,在内部 IDC 强网络的状态下多次网路调用相对没有那么糟糕。

API Gateway 涉及到这些不同端的 API Gateway 应该要谁来维护的问题。下面是一种理想的情况,Mobile 团队负责维护他们在 Gateway 里的 API(也可能是单独的 Gateway),web 端团队维护 web 的 Gateway,open API 团队负责维护第三方应用的 Gateway API。

网关基础设施团队负责提供这三方都需要的基础库。

在研发 API Gateway 的时候,我们有多种可选项:

  • 直接使用开源产品

    • Kong

    • APISix

    • Traefik

  • 自研

    • Zuul

    • Spring Cloud Gateway

    • RESTFul 自己做一个

    • GraphQL 自己做一个

开源的 API Gateway 大多不支持 API 数据组合功能,所以公司内的 API Gateway 有时候有两层,一层是 nginx 之类的负责简单路由和鉴权的 gateway,后面还有一个业务的 BFF 来负责拼装端上需要的数据。

如果我们都是自研,那就可以在一个模块上把 API Gateway 需要的功能都实现。这里经常讨论的一个问题是,我们是要使用 REST 还是类似 GraphQL 的图查询。

Netflix 的工程师在 2012 年发表过一篇文章:

《为什么 REST 让我半夜睡不着》,老哥还挺幽默。内容大概是讲 Netflix 要面对成百上千的终端设备,Netflix 曾经希望能给所有终端提供大一统的方案,大家使用统一的 REST API,但后来发现这种统一的方式是放弃了对任一有自己特性的设备的优化,比如有些设备内存小,有些设备屏幕小,这些设备上你返回的很多字段数据对他们来说根本就用不上,纯粹是浪费网络带宽。有些设备用流式响应比返回完整响应性能更好,这也应该是要考虑的优化点。

所以 Netflix 做了一个叫 falcor 的方案,其实和后来 Facebook 的 GraphQL 非常类似,是用 JSON Graph 来描述内部 API 能提供的数据,然后用 JS 来定制图上的查询。

现在大多数人比较熟悉的还是 GraphQL:

GraphQL 是个好东西,但之前我个人对使用 GraphQL 一直持怀疑态度,主要是因为:

  • 网关容易被客户端的修改直接带崩

  • 稳定性非常难保障

  • 中文互联网上讲 GraphQL 的基本都没有提到限流,或者一笔带过,这是不太负责任的

直到最近我发现国外某公司公开了他们的 GraphQL 限流方案,这个方案非常有意思,我会在下一篇文章进行分享。

这本《微服务架构模式》难能可贵的地方在于几乎所有的技术方案,都很详尽地给出了优劣,这在其它书里是比较少见的。我们在某些人的文章和方案里永远只能看到优点,但在实践中落地技术方案的时候,其实更关注缺陷。对缺陷有心理准备,才不会在新方案出问题的时候心慌。

个人觉得这本书,无论是对微服务刚入门,或是工作几年的人,都值得一读。

参考阅读

高可用架构欢迎技术架构领域原创文章,欢迎通过公众号菜单「联系我们」进行投稿。

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
很抱歉,我无法提供PDF文件的下载。但是,对于微服务架构设计模式,你可以考虑参考以下两本书: 1. 喻勇翻译的《微服务架构设计模式》:这本书是近几年我所看到的众多论述微服务架构书籍中最好的一本。它深入浅出地介绍了微服务与SOA等其他架构的区别,讨论了微服务的架构设计、服务拆分策略、同步和异步通信模式、事务管理、业务逻辑设计等方面的内容。此外,它还详细描述了微服务架构中的测试和生产部署策略。这本书所总结出的架构经验对设计微服务架构有很好的指导作用,建议软件研发人员认真研读。 2. Chris Richardson的《Java微服务架构设计模式》:这本书由微服务架构的先驱、Java开发者社区的意见领袖Chris Richardson亲自撰写。它旨在帮助架构师和程序员学会使用微服务架构成功开发应用程序。书中介绍了如何解决我们在微服务架构设计中面临的各种挑战,包括管理分布式数据、将单体应用程序重构为微服务架构等。此外,书中还涵盖了44个架构设计模式,具体涉及服务拆分、事务管理、查询和跨服务通信等方面。这本书不仅介绍了微服务的原理和原则,还讲解了实际落地中的架构设计模式,使你能够全面理解微服务架构,并在实际应用中做出正确的架构选择和取舍。 这两本书都是专门讨论微服务架构设计模式的,并且提供了实际的代码例子,可以帮助你更好地理解和应用微服务架构设计模式。希望对你有帮助!<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [多位大厂专家鼎力推荐,44个微服务架构设计模式pdf,程序员福利](https://blog.csdn.net/shy111111111/article/details/128253809)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] - *2* [微服务架构设计模式 PDF 电子书 百度云 网盘下载](https://blog.csdn.net/weixin_39713763/article/details/110624540)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值