2024年支撑日均百万订单的微服务架构应该这么搞,Java高并发书籍

写在最后

很多人感叹“学习无用”,实际上之所以产生无用论,是因为自己想要的与自己所学的匹配不上,这也就意味着自己学得远远不够。无论是学习还是工作,都应该有主动性,所以如果拥有大厂梦,那么就要自己努力去实现它。

最后祝愿各位身体健康,顺利拿到心仪的offer!

由于文章的篇幅有限,所以这次的蚂蚁金服和京东面试题答案整理在了PDF文档里

蚂蚁、京东Java岗4面:原理+索引+底层+分布式+优化等,已拿offer

蚂蚁、京东Java岗4面:原理+索引+底层+分布式+优化等,已拿offer

蚂蚁、京东Java岗4面:原理+索引+底层+分布式+优化等,已拿offer

本文已被CODING开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友,可以点击这里获取

庞大的分布式系统,需要强大基础设施来支撑,微服务涉及哪些基础设施?

  • CI/CD 和自动化(分布式系统几乎不可能通过人工手动发布。)

  • 虚拟化技术(要保证微服务运行环境隔离,目前行业主流的是使用 Docker 容器)。

  • 日志聚合,全链路监控(高度可观察和分析诊断问题)。

说了那么多,那什么样的情况下,你的团队不适合建设微服务?(请勿对号入座)

  • 开发团队不具备自主性,所在组织对开发团队限制非常多(具体请参考 康威定律)。

  • 团队不熟悉业务,无法识别出服务的边界,进行合理的拆分(请参考 DDD 领域驱动设计)。

微服务设计其实是很早就有的设计思想,因为随着虚拟化技术的崛起,微服务可以低成本的实现,所以也开始流行和兴起。

微服务的内涵很深,其中就包括,自动化,去中心化,独立性等等,其中细节无法用一篇文章概述清楚,我们在做技术选型或者方案的时候,尽可能多去了解技术的本身和起源再结合我们业务的特点,进行更好的选择。

如何低成本的实现微服务?

============

Spring Cloud 为什么是国内最流行的微服务框架,它提供哪些开箱即用的组件 ?

概览如下:

  • Srping Boot 服务应用

  • Spring Cloud Config 配置中心

  • Spring Cloud Eureka 服务发现

  • Spring Cloud Hystrix 熔断保护

  • Spring Cloud Zuul 服务网关

  • Spring Cloud OAuth 2 服务保护

  • Spring Cloud Stream 消息驱动

  • 分布式全链路跟踪

  • 部署微服务

①Spring Boot 微服务基石

支撑日均百万订单的微服务架构应该这么搞

Spring Boot 是构建微服务的理想框架,主要得益于 Spring Boot 可以打包成为单个可执行JAR文件交付服务,Spring Actuator 公开服务健康信息都是微服务的基石,为什么这么说 ?

我们先看看构建微服务的四个重要原则:

  • 服务应该是独立和可独立部署的

  • 应该从中央(配置中心)读取配置

  • 对客户端是透明的

  • 传达健康信息

微服务有优点和缺点,并非所有应用都适合用微服务架构,架构师需要能做到以下要求:

  • 分解业务问题:描述业务问题,注意动词,寻找数据内聚。

  • 建立服务粒度:讲大服务重构到更小的服务,重点关注服务如何相互交互,服务职责随时间改变。

  • 定义服务接口:拥抱 REST 的理念,使用 URI 来传达意图,使用 HTTP 状态码传达结果。

糟糕的微服务有哪些特征?

  • 过于粗粒度:服务承担过多的职责,服务跨大量表来管理数据,测试用例太多。

  • 过于细粒度:服务彼此依赖严重,服务内部没有逻辑。

何时不应该使用微服务 ?

  • 不愿投入(需要高度成熟的运维,伸缩,复杂性问题)。

  • 管理/监控散乱的服务器也需要很高的成本。

  • 小型应用不适合,太昂贵。

  • 数据事务(分布式系统处理事务非常困难)

②Spring Cloud Config 配置服务

支撑日均百万订单的微服务架构应该这么搞

Spring Config 是 Spring 提供的配置中心轻量级实现,基于 Git 存储,国内用户大多推荐使用 Alibaba 开源的 Nacos(集成配置中心和注册中心)都是非常不错的配置中心的实现。

微服务程序对于配置中心的几点管理原则:

  • 应用程序的配置和部署的实际代码分离(配置中心和应用程序分离)。

  • 集中(将配置中心集中在少量的存储库中)。

  • 稳定(配置中心要保证高可用)。

Spring Config 这款配置中心提供的核心功能:

  • 配置服务器允许使用环境特定值。

  • 使用 Spring Profile 区分环境值。

  • 可以使用基于文件或基于 Git 存储属性。

  • 允许对称加密和非对称加密。

③Spring Cloud Eureka 服务发现

支撑日均百万订单的微服务架构应该这么搞

服务发现是微服务架构中非常重要的概念,也称注册中心,类似我们生活中的房地产中介的角色,买房卖房都要通过它。

所以它是所有微服务上线/下线的必经之路,也掌握微服务的生杀大权,注册中心会根据 CAP 策略和对微服务的健康检查,作出对具体服务剔除,下线,恢复上线等操作。

主要还有以下几个核心功能:

  • 快速对环境中服务数量水平伸缩(功能和 K8s 有些重合,不过也可以设定具体服务的运行时数量)。

  • 抽象服务的物理位置(微服务通常运行在 Docker 容器内,没有固定 IP,只能通过注册中心才能找到它)。

  • 提高程序的弹性,自动伸缩。

  • 信息共享, 健康检测。

微服务架构里面要实现注册中心,需要达到哪些基本要求?

  • 高可用,注册信息共享(注册中心集群部署),不可能因为注册中心挂了,导致所有集群不可用。

  • 负载均衡(对服务间的动态请求负载均衡),合理在服务间分配流量。

  • 有弹性(客户端缓存服务信息)。

  • 容错,健康检查(检测坏掉的服务自动移除,无需人工干预)。

支撑日均百万订单的微服务架构应该这么搞

Spring Eureka 提供的服务发现实现,具备哪些特点 ?

  • 服务发现抽象服务的物理位置。

  • 无感知添加和移除服务。

  • 为服务间调用提供负载均衡。

  • 使用 3 种不同机制来调用服务:DiscoveryClient,支持 Ribbon 的 RestTemplate,Netflix 的 FeignClient。

④Spring Cloud Hystrix 熔断保护

支撑日均百万订单的微服务架构应该这么搞

为什么微服务进行熔断 ?当一个服务出现问题:

  • 通常都是从小部分开始,到耗尽线程彻底崩溃。

  • 服务间调用会长时间阻塞。

  • 服务未关闭就会一直被调用,导致连锁效应。

  • 一个性能不佳的服务可以迅速拖垮整个应用。

为什么熔断很重要 ?

  • 每个节点(调用服务和数据库)实现断路器,可以避免服务崩溃的连锁效应。

  • 实现只有出问题的服务受影响,其余的服务功能都是完整的(影响范围降到最小)。

  • 熔断是服务器的灵活的基础。

断路器提供的关键能力:

  • 快速失败。

  • 功能降级(替代方案)。

  • 无缝恢复(断路器定期检查,自动恢复服务)。

支撑日均百万订单的微服务架构应该这么搞

Netflix 研发和出品的 Hystrix 实现是一款成熟稳定的熔断实现,在 Netflix 在生产实践和运行多年,非常可靠,后面加入 Spring Cloud 体系,成为 Spring Cloud 微服务生态链的一员,使用起来也非常的简单和方便。

Hystrix 支持四种断路模式:

  • 客户端负载均衡模式(检测服务出错,移除服务)。

  • 断路器模式(出现超时抛出异常强行失败,超过阈值强行失败所有调用)。

  • 后备模式(不是抛出异常而是执行替代方案,例如排队,稍后再试等)。

  • 舱壁模式(把远程调用的资源分配到独立的线程池中,调用出问题只是线程池饱和并停止请求)。

跳闸会导致的三种结果:

  • 服务 B 立即知道服务 C 有问题,不必等待,立即失败。

  • 服务 B 执行服务 C 的替代代码来采取行动(后备模式)。

  • 服务 C 可以在跳闸后,检查问题,快速恢复。

支撑日均百万订单的微服务架构应该这么搞

熔断的几个处理原则:

  • 设计分布式应用必须考虑弹性。

  • 服务的彻底故障是很容易检测和处理,只是需要时间,断路器给了这个时间窗口。

  • 一个服务性能不佳,可能导致集群崩溃,因为相互调用会阻塞线程,耗尽资源。

  • Hystrix 支持两种隔离模型,即 THREAD 和 SEMAPHORE。

⑤Spring Cloud Zuul 网关

网关是整个微服务分布式集群的入口,对于用户来说,用户无需知道你每个服务的地址,只需要记住网关地址就可以了。

这样理解可能比较抽象,举一个生活的例子,微服务集群是一个大型公司,公司内部有很多个不同的职能部门(对应每个微服务)。

但是你如果要访问具体的职能部门,你必须先到前台登记,再由前台带你到你想访问的具体职能部门去办理实际的业务(智能路由)。

微服务对于网关实现的规范:

  • 一个独立负责所有服务调用过滤和路由的服务。

  • 服务和客户端的中间人,简化客户端开发。

网关通常要做哪些事情:

  • 静态路由,从注册中心获取每个微服务的具体位置。

  • 动态路由(根据参数特点,调用特定服务,少量用户体验新功能,通常用于灰度发布)。

  • 验证和授权:验证访客的身份信息(统一验证,服务只需要关注业务逻辑)。

  • 数据收集和日志(收集调用次数和响应时间等)。

Zuul 网关的具体运行参考图:

支撑日均百万订单的微服务架构应该这么搞

Spring Cloud Zuul 是初期版本的 API 网关实现,提供以下功能:

  • 结合 Spring Cloud Eureka 将服务发现的注册地址加入到 Zuul 路由。

  • Zuul 可以给所有服务轻松的添加/API 之类的前缀路由地址。

  • 在全局上定制 Zuul 的 Spring Cloud Hystrix 和 Spring Cloud Ribbon (调度策略)的超时。

  • 实现动态路由,不同版本进行 A/B 测试。

  • 检查参数合法性等,例如 JWT,时间戳等等。

⑥Spring Cloud OAuth 2 服务保护

Oauth 2 是用于保证请求的合法和正确性,为了让微服务本身更加专注于业务,所以 OAuth 2 类似配置中心被单独抽离出来作为基础组件的统一认证中心来使用。

OAuth 2 的作用类似我们生活中的公安局的角色,当我们需要去正规机构办理业务的时候,我们需要提供有效的身份证(合法的身份认证标示)。

如果没有你就需要去公安局(OAuth)申请一张在有效期内的身份证(Token),然后带着这张身份证我们才能去购买机票,酒店等其他社会服务(微服务)。

社会服务机构在拿到你提供的身份证(Token)后,也会向公安局(OAuth)联网发送信息,来验证你的身份证的合法性(Token 合法性校验),身份认证不通过就会被拒绝服务,合法的身份才能进行业务的办理。

关于 OAuth 的工作流程,可以结合下图来理解:

支撑日均百万订单的微服务架构应该这么搞

微服务对于 OAuth2 规范的 4 种类型授权:密码/客户端凭据/授权码/隐式。

Spring Cloud OAuth 2 为我们提供哪些便利?

  • 安全框架,提供令牌生成,验证等逻辑。

  • 开箱即用,和其他服务无缝集成。

  • 行业标准,轻松与云服务商集成。

OAuth 2:/auth/oauth/token 的返回信息:

  • access_token(OAuth 2 令牌,每次调用出示)。

  • token_type(令牌类型,常用 bearer token)。

  • refresh_token(续约令牌)。

  • expires_in(过期描述,默认 12H)。

  • scope(令牌有效作用域)。

OAuth 2 支持 JWT (JSON Web Token)的规范,关于 JWT 的原理就不特别解释了。

简单的 JWT 有以下几个特点:

  • 小巧(Base64编码)。

  • 密码签名(防篡改)。

  • 自包含(不需要调用验证服务确认内容,通过相同的密钥进行对称解密)。

  • 可扩展(可在令牌内包含额外的信息)。

OAuth 2 的简单总结:

  • OAuth 2 是一个令牌验证框架。

  • 使用 OAuth 2 需要建立 OAuth 2 验证服务。

  • 调用受保护的资源都要通过 OAuth 2 验证。

⑦Spring Cloud Stream 消息驱动

我们和世界的互动不是同步的,很多时候是基于消息异步驱动模型,比如邮件,点餐,订票等等,想要了解 Spring Cloud Stream,必须先要理解基于事件(MQ)编程的模型,基于消息驱动有利于开发构建高度解耦的系统。

因为 Spring Cloud Stream 并不是自己实现了消息中间件,而是对于市场上主流(例如 RabbitMQ,KafKa)的 MQ 产品做了一层封装和抽象。

Spring Cloud Stream 做的事情并不是什么新鲜的事情,非常类似 ORM 所做的事情,了解 ORM 框架的同学应该都熟悉对于多种数据库(MySQL,Oracle,SQL Server)产品的抽象是何等重要。

面向 ORM 进行数据库访问,可以让你脱离对于指定数据库产品的深度依赖和绑定,而且可以不用特意去学习不同数据库的本地化特性和方言,降低学习成本。

假如你想从 Oracle 迁移到 MySQL 上面,几乎是不需要改动一行代码,只需要改动 ORM 的配置就可以实现了。

参考下图简单了解一下 ORM:

支撑日均百万订单的微服务架构应该这么搞

Spring Cloud Stream 类似 ORM,你只需要基于 Spring Cloud Stream 提供的消息模型进行编程。

至于底层的消息组件是用的 RabbitMQ 还是 Kafka 还是其他的消息中间件产品,都没有关系,甚至更换底层消息组件也不会对你的应用产生任何影响,这就是标准化所带来的收益。

关于如何更好的理解 Spring Cloud Stream 工作模型可以简单参考下图:

支撑日均百万订单的微服务架构应该这么搞

微服务中使用的的两种服务通信方式对比:

  • 同步:通过 REST 端点接口进行请求:服务之间紧耦合(强依赖),服务之间的脆弱性(连锁效应),增加新的消费者不灵活。

  • 异步:基于消息中间件通信:松耦合(无接口直接调用的依赖),耐久性(服务重启后可以消费历史消息),可伸缩性(消息过多可启动多服务来处理消息),灵活性(轻松添加新的消费者)。

消息传递架构的缺点:

  • 消息处理语义:消息顺序处理,消息异常处理。

  • 消息可见性:消息不会立刻被处理,事务关联 ID 在消息中的传递。

消息中放置什么数据 ?

最后

面试前一定少不了刷题,为了方便大家复习,我分享一波个人整理的面试大全宝典

  • Java核心知识整理

2020年五面蚂蚁、三面拼多多、字节跳动最终拿offer入职拼多多

Java核心知识

  • Spring全家桶(实战系列)

2020年五面蚂蚁、三面拼多多、字节跳动最终拿offer入职拼多多

  • 其他电子书资料

2020年五面蚂蚁、三面拼多多、字节跳动最终拿offer入职拼多多

Step3:刷题

既然是要面试,那么就少不了刷题,实际上春节回家后,哪儿也去不了,我自己是刷了不少面试题的,所以在面试过程中才能够做到心中有数,基本上会清楚面试过程中会问到哪些知识点,高频题又有哪些,所以刷题是面试前期准备过程中非常重要的一点。

以下是我私藏的面试题库:

2020年五面蚂蚁、三面拼多多、字节跳动最终拿offer入职拼多多

本文已被CODING开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友,可以点击这里获取

外链图片转存中…(img-dmkqCXM4-1715065466368)]

Java核心知识

  • Spring全家桶(实战系列)

[外链图片转存中…(img-9FDyWgX5-1715065466368)]

  • 其他电子书资料

[外链图片转存中…(img-LoYqLkbs-1715065466369)]

Step3:刷题

既然是要面试,那么就少不了刷题,实际上春节回家后,哪儿也去不了,我自己是刷了不少面试题的,所以在面试过程中才能够做到心中有数,基本上会清楚面试过程中会问到哪些知识点,高频题又有哪些,所以刷题是面试前期准备过程中非常重要的一点。

以下是我私藏的面试题库:

[外链图片转存中…(img-dBsyfZeA-1715065466369)]

本文已被CODING开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友,可以点击这里获取

电商项目中,秒杀属于技术挑战难度很大的业务。后台可以发布秒杀商品后或者将现有商品列入秒杀商品,热点分析系统会对商品进行分析,对热点商品做特殊处理。商城会员可以在秒杀活动开始的时间内进行抢购,抢购后可以在线进行支付,支付完成的订单由平台工作人员发货,超时未支付订单会自动取消。 秒杀系统中一共涉及到管理员后台、搜索系统、秒杀系统、抢单流程系统、热点数据发现系统等等。B2B 、B2C商城秒杀商品数据一般都是非常庞大,流量特别高,尤其是双十一等节日,所以设计秒杀系统,既要考虑系统抗压能力,也要考虑系统数据存储和处理能力。秒杀系统虽然流量特别高,但往往高流量抢购的商品为数不多,因此我们系统还需要对抢购热门的商品进行有效识别。 那秒杀系统里面需要解决的问题有哪些呢?1、如何应对海量商品访问?2、热点分析系统该如何设计,实现普通商品和热点商品的实时转换?3、普通商品和热点商品的抢单该如何设计和实现?4、面对海量的订单,我们该如何实现订单生成?5、面对用户超时未支付的订单,我们该如何设计和处理,包括订单信息变更和库存变更等。等等的问题? 本课程将从实战角度带你构建秒杀系统,解决以上我们关注的问题,同时结合实战讲解技术点,让大家在实战中掌握知识点。课程包含JavaEE、微服务、Linux、任务调度、大数据等综合性知识,让大家成为一个综合人才,提高自己的竞争力,为以后跳槽涨薪做好重复准备,机遇来了就能抓住。 课程所用的开发环境为:window10 开发工具:IDEA本课程用到技术:SpringBootSpringCloudMyBatisMySQLFreemark模板引擎BinlogCanalXXL-JOB分布式任务调度NginxLua轻量级脚本语言Flink实时分析KafkaZookeeperRedisOpenrestyMaven等等
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值