大型网站演变中的负载均衡场景

业务微服务化

为了保证业务的多变,我们需要把各自业务进行解耦,这边需要的技术Dubbo或Spring Cloud微服务框架。这两个框架都支持微服务集群部署,以及调用方的负载均衡。如下图的订单微服务会部署几个订单微服务,形成集群,web服务调用方会做负载均衡的调用。这边就涉及到了第二个负载均衡的场景,是利用微服务框架自身的功能

分布式缓存

活跃用户的增大,会对DB数据库的访问压力过大,这个时候会考虑增加缓存层来帮助DB减压。在进行分布式缓存进行规划时,会用到redis集群作为缓存。redis集群方案中利用哈希槽的方式,达到了缓存数据量的拆分,以及负载均衡。这个就是第****三个负载均衡场景

nginx集群

用户并发到了几千的时候,就要考虑到nginx的高可用,虽然nginx的性能比较高,但也经不起量大啊。利用LVS来实现nginx的高可用和负载均衡这个又是一个负载均衡场景

大型阶段

此阶段的业务已经趋于稳定,数据量也越有越大,用户活跃也很大;业务复杂度很高,已经业务流程多变,市场规模发展到全国,有多机房多区域的部署的需求。公司规模大了以后,网络安全就显得尤为重要。系统一定要保证稳定

分库分表

数据库单表如果超过300多万条记录时,就要考虑到分表;数据库的IO操作已经一直处于高负荷状态,就可以考虑把业务进行拆分到不同的DB中,以及数据库的主从设计实现读写分离,设计来降低DB负载和高可用。

分库分表中可以采用两种方案,一种代理层方案,如:MyCat框架;一种是客户端实现,如sharding-jdbc。这个又是一种在数据库层的负载均衡场景

消息中间件

业务的复杂度高,需要很好的拆分业务,更进一步的业务解耦,以及高并发下限流会用到消息中间件,如:RocketMQ,RabbitMQ。

还有分布式事务中,为了保证最终一致性,也会用到消息中间件。

消息中间件是天生的集群化,保证消息中间件的高可用以及负载均衡,有这个是消息队列层的负载均衡场景。

网关

在分布式架构下,为了进行统一的路由,鉴权,限流,监控等;这个时候就要上网关,现在网关框架为:Kong,Zuul,GateWay,Soul等,这些框架也是集群化的。部署到nginx层下面(kong可以直接替换nginx,因为就是在nginx基础上设计的)架设网关层。这个是网关层的负载均衡场景

跨机房

业务时全国市场,甚至全球市场的话,因为地区网络节点是按照地区架设的,所以要保证多地区能够快速访问我们的网站,这个时候就需要做多机房的设计。多机房的设计就是利用了DNS,这个就是DNS层的负载均衡

到达这一步的话,一般在同一机房下,会部署几套系统集群方案,这个时候一般在机房里面会加入硬件负载均衡器,如:F5,A10;硬件负载均衡器是蛮贵的,不过公司已经发展到这个地步了,应该有钱了。

涉及到跨机房,系统设计的时候就会非常复杂,尤其要考虑到机房间数据如何共享,同步?这些点老顾在以后的文章中会介绍,跨机房要解决什么问题?

总结

有个共同点就是大型系统不允许有单点故障,就需要集群化,一旦有集群化的地方,肯定会有负载均衡的场景应用。

大型系统的发展,是根据业务发展而来的,在业务没有达到一定的程度时,要选择合适的系统设计,不能超前选择很复杂的方案,会导致开发周期会很长,系统也会变的复杂,没有必要,这一点是技术老大需要重视的。

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数Java工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!

如果你觉得这些内容对你有帮助,可以扫码获取!!(备注Java获取)

img

Java高频面试专题合集解析:

阿里Java岗面试百题:Spring 缓存 JVM 微服务 数据库 RabbitMQ等

当然在这还有更多整理总结的Java进阶学习笔记和面试题未展示,其中囊括了Dubbo、Redis、Netty、zookeeper、Spring cloud、分布式、高并发等架构资料和完整的Java架构学习进阶导图!

阿里Java岗面试百题:Spring 缓存 JVM 微服务 数据库 RabbitMQ等

更多Java架构进阶资料展示

阿里Java岗面试百题:Spring 缓存 JVM 微服务 数据库 RabbitMQ等

阿里Java岗面试百题:Spring 缓存 JVM 微服务 数据库 RabbitMQ等

阿里Java岗面试百题:Spring 缓存 JVM 微服务 数据库 RabbitMQ等
《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!
全套讲解视频、实战项目源码讲义》点击传送门即可获取!**

  • 10
    点赞
  • 19
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值