为什么大公司一定要使用微服务?微服务杂谈,非科班面试之旅

先决条件

  • 快速的环境提供能力:

    依赖于云计算、容器技术,快速交付环境。

  • 基本的监控能力:

    包括基础的技术监控和业务监控。

  • 快速的应用部署能力:

    需要部署管道提供快速的部署能力。

  • Devops文化:

    需要具有良好的持续交付能力,包括全链路追踪、快速环境提供和部署等,还需要快速的反应能力(对问题、故障的快速响应),开发和运维的协同工作。

此外,根据康威定律和逆康威定律(技术架构倒逼组织架构改进),组织架构也是一个很关键的因素。对应于微服务架构,组织架构需要遵循以下原则:

  1. 一个微服务由一个团队维护,团队成员以三人为宜。

  2. 单个团队的任务和发展是独立的,不受其他因素影响。

  3. 团队是功能齐全、全栈、自治的,扁平、自我管理。

基础设施

微服务的推行需要依赖于很多底层基础设施,包括提供微服务的编译、集成、打包、部署、配置等工作,采用PaaS平台解决微服务从开发到运行的全生命周期管理,同时提供异构环境管理、容器资源隔离与互通、服务伸缩漂移、服务升级与回退、服务熔断与降级、服务注册与发现。

  1. 最基本的基础设施
  • 进程间通讯机制:

    微服务是独立进程的,需要确定之间的通讯方式。

  • 服务发现+服务路由: 提供服务注册中心,服务提供者和消费者通过服务发现获取服务的信息从而调用服务,实现服务的负载均衡等。

  • 服务容错:

    微服务架构中,由于服务非常多,往往是一个服务挂了,整个请求链路的服务都受到影响,因此需要服务容错,在服务调用失败的时候能够处理错误或者快速失败,包括熔断、fallback、重试、流控和服务隔离等。

  • 分布式事务支持:

    随着业务拆分为服务,那么有时候不可避免的就是跨服务的事务,即分布式事务的问题。

    原则是尽量避免分布式事务,如果无法避免那么可以使用消息系统或者CQRS和Event Sourcing方案来实现最终一致性。

    如果需要强一致性,则有两阶段提交、三阶段提交、TCC等分布式事务解决方案。

  1. 提升外部服务对接效率和内部开发效率
  • API网关: 负责外部系统的访问,负责跨横切面的公共层面的工作,包括安全、日志、权限控制、传输加密、请求转发、流量控制等。

    典型的网关功能即对外暴露一个域名xx.com,根据第一级目录做反向路由xx.com/user,xx.com/trade。

    每一级目录,如user、trade对应一个服务的域名。

    此外,API网关也可以有服务编排的功能(不推荐)。

  • 接口框架: 规范服务之间通讯使用的数据格式、解析包、自解释文档,便于服务使用方快速上手等。

  1. 提升测试和运维效率
  • 持续集成:

    这一部分并非是微服务特定的,对于之前的单体应用,此部分一般来说也是必要的。

    主要是指通过自动化手段,持续地对代码进程编译构建、自动化测试,以得到快速有效的质量反馈,从而保证代码的顺利交付。

    自动化测试包括代码级别的单元测试、单个系统的集成测试、系统间的接口测试。

  • 自动化部署:

    微服务架构,节点数动辄上百上千,自动化部署能够提高部署速度和部署频率,从而保证持续交付。

    包括版本管理、资源管理、部署操作、回滚操作等功能。

    而对于微服务的部署方式,包括蓝绿部署、滚动部署以及金丝雀部署

  • 配置中心: 运行时配置管理能够解决动态修改配置并批量生效的问题。

    包括配置版本管理、配置项管理、节点管理、配置同步等。

  • 持续交付:

    包括持续集成、自动化部署等流程。

    目的就是小步迭代,快速交付。

  1. 进一步提升运维效率
  • 服务监控: 微服务架构下节点数目众多,需要监控的机器、网络、进程、接口等的数量大大增加,需要一个强大的监控系统,能够提供实时搜集信息进行分析以及实时分析之上的预警。

    包括监控服务的请求次数、响应时间分布、最大/最小响应值、错误码分布

  • 服务跟踪:

    跟踪一个请求的完整路径,包括请求发起时间、响应时间、响应码、请求参数、返回结果等信息,也叫做全链路跟踪。

    通常的服务监控可以和服务监控做在一起,宏观信息由服务跟踪呈现,微观单个服务/节点的信息由服务监控呈现。

    服务跟踪目前的实现理论基本都是Google的Dapper论文。

  • 服务安全:

    内网之间的微服务调用原则上讲应该是都可以互相访问写,一般并不需要权限控制,但有时候限于业务要求,会对接口、数据等方面有安全控制的要求。

    此部分可以以配置的方式存在于服务注册中心中,和服务绑定,在请求时由做为服务提供者的服务节点进行安全策略控制。

    配置则可以存储在配置中心以方便动态修改。

在微服务数量很少的情况下,以上基础设施的优先级自上而下降低。否则,仅仅依赖人工操作,则投入产出比会很低。

还需要提到的是Docker容器技术。虽然这个对于微服务并不是必须的,但是容器技术轻量级、灵活、与应用依存、屏蔽环境差异的特性对于持续交付的实现是至关重要的,即使对于传统的单体应用也能够给其带来交付效率的大幅提升。

架构设计模式

在引入微服务之后,传统的单体应用变为了一个一个服务,之前一个应用直接提供接口给客户端访问的架构不再适用。微服务架构下,针对不同设备的接口做为BFF层(Backend For Frontend),也叫做用户体验适配层,负责聚合、编排微服务的数据转换成前端需要的数据。服务之间的调用则在允许的情况下(允许延迟)尽可能使用异步消息传递方式,如此形成面向用户体验的微服务架构设计模式。如下图所示:

Client -> API Gateway -> BFF(Backend For Frontend) -> Downstream Microservices

  • 后台采用微服务架构,微服务可以采用不同的编程语言和不同的存储机制。

  • 前台采用BFF模式对不同的用户体验(如桌面浏览器,Native App,平板响应式Web)进行适配。

  • BFF、API Orchestration Layer,Edge Service Layer,Device Wrapper Layer是相同的概念。

  • BFF不能过多,过多会造成代码逻辑重复冗余。

  • 可以将网关承担的功能,如Geoip、限流、安全认证等跨横切面功能和BFF做在同一层,虽然增加了BFF层的复杂性,但能够得到性能优势。

服务拆分

微服务架构最核心的环节,主要是对服务的横向拆分。服务拆分就是讲一个完整的业务系统解耦为服务,服务需要职责单一,之间没有耦合关系,能够独立开发和维护

服务拆分不是一蹴而就的,需要在开发过程中不断地理清边界。在完全理清服务之前,尽量推迟对服务的拆分,尤其是对数据库的拆分。

拆分方法如下:

  • 基于业务逻辑拆分

  • 基于可扩展拆分

  • 基于可靠性拆分

  • 基于性能拆分

其中,对于无法修改的遗留系统,采用绞杀者模式:在遗留系统外面增加新的功能做成微服务方式,而不是直接修改原有系统,逐步的实现对老系统替换。

拆分过程需要遵守的规范如下:

  • 先少后多、先粗后细(粒度)

  • 服务纵向拆分最多三层,两次调用:

    Controller、组合服务、基础服务

  • 仅仅单向调用,禁止循环调用

  • 串行调用改为并行调用或者异步化

  • 接口应该幂等

  • 接口数据定义严禁内嵌,透传

  • 规范化工程名

  • 先拆分服务,等服务粒度确定后再拆分数据库。

微服务框架

上面讲述了微服务架构的众多基础设施,如果每一个基础设施都需要自己开发的话是非常巨大的开发工作。目前市面上已经有不少开源的微服务框架可以选择。

  1. Spring Boot

    Spring Boot是用来简化新Spring应用的初始搭建以及开发过程的。其虽然不是微服务框架,但其设计的初衷本质就是微应用的底层框架,因此非常适合用于微服务基础设施的开发以及微服务的应用开发。尤其对于Spring技术栈的团队来说,基于Spring Boot开发微服务框架和应用是自然而然的一个选择。

  2. Dubbo&&Motan

    Dubbo阿里开源的服务治理框架。其出现在微服务理念兴起之前,可以看做是SOA框架的集大成之作。但其仅仅包含了微服务基础设施的部分功能,诸如熔断、服务跟踪、网关等都没有实现。

    Motan则是微博开源的类似Dubbo的RPC框架,与Dubbo相比更轻量级。

  • 服务发现 :

    服务发布、订阅、通知

  • 高可用策略 :

    失败重试(Failover)、快速失败(Failfast)、资源隔离 - 负载均衡 :

    最少活跃连接、一致性 Hash、随机请求、轮询等

  • 扩展性 :

    支持 SPI 扩展(service provider interface)

  • 其他 :

    调用统计、访问日志等

  1. Spring Cloud

    Spring Cloud是基于Spring Boot实现的微服务框架,也可以看做一套微服务实现规范。基本涵盖了微服务基础设施的方方面面,包括配置管理、服务发现、断路器、智能路由、微代理、控制总线、全局锁、决策竞选、分布式会话和集群状态管理等。其基于Spring生态,社区支持非常好。但其很多组件都没有经过生产环境验证,需要慎重选择。

    Spring Cloud Netflix是Spring Cloud的一个子项目,是Spring对Netflix OSS的集成实现。基于Netflix的大规模使用,其中的已经被广泛使用的组件包括:

    此外,另一个子项目Spring Cloud Alibaba则是Alibaba开源的基于Spring Boot的微服务框架,主要是对阿里云服务的支持。

  • Eureka:

    服务注册和服务发现

  • Ribbon:

    弹性而智能的进程间和服务通讯机制,客户端负载均衡

  • Hystrix:

    熔断器,在运行时提供延迟和容错的隔离

  • Zuul: 服务网关

  1. Service Mesh

    上述的微服务框架都是侵入式的,服务化的过程都需要进行代码改造。Service Mesh则是下一代微服务架构,最明显的特征就是无入侵。采用sidecar模式来解决系统架构微服务化后的服务间通信和治理问题。如下图所示:

    目前主流的开源实现包括:

    限于Service Mesh带来的性能延迟的开销以及sidecar对分布复杂性的增加,其对大规模部署(微服务数目多)、异构复杂(交互协议/开发语言类型多)的微服务架构带来的收益会更大。

  • Linkerd和Envoy:

    以 sidecar 为核心,关注如何做好proxy,并完成一些通用控制平面的功能。

    缺乏对这些sidecar的管理和控制。

  • Istio和Conduit:

    目前最为流行的Service Mesh实现方案,集中在更加强大的控制平面(sidecar被称为数据平面)功能。

    前者由Google和IBM合作,并使用了Envoy作为sidecar部分的实现;

    后者则是Linkerd作者的作品。

    相比起来,Istio有巨头背景,功能强大,但可用性和易用性一直不高,Conduit则相对简单、功能聚焦。

  1. Sofastack

总结

虽然我个人也经常自嘲,十年之后要去成为外卖专员,但实际上依靠自身的努力,是能够减少三十五岁之后的焦虑的,毕竟好的架构师并不多。

架构师,是我们大部分技术人的职业目标,一名好的架构师来源于机遇(公司)、个人努力(吃得苦、肯钻研)、天分(真的热爱)的三者协作的结果,实践+机遇+努力才能助你成为优秀的架构师。

如果你也想成为一名好的架构师,那或许这份Java成长笔记你需要阅读阅读,希望能够对你的职业发展有所帮助。

CodeChina开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频】

image

于机遇(公司)、个人努力(吃得苦、肯钻研)、天分(真的热爱)的三者协作的结果,实践+机遇+努力才能助你成为优秀的架构师。

如果你也想成为一名好的架构师,那或许这份Java成长笔记你需要阅读阅读,希望能够对你的职业发展有所帮助。

CodeChina开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频】

[外链图片转存中…(img-G35GS7WV-1630937919422)]

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值