SpringCloud底层其实是利用了一个名为Ribbon的组件,来实现负载均衡功能的。
1.负载均衡基本流程
SpringCloudRibbon的底层采用了一个拦截器,拦截了RestTemplate发出的请求,对地址做了修改。
那么我们发出的请求明明是http://userservice/user/1,怎么变成了http://localhost:8081的呢?
基本流程如下:
-
拦截我们的RestTemplate请求http://userservice/user/1
-
RibbonLoadBalancerClient会从请求url中获取服务名称,也就是user-service
-
DynamicServerListLoadBalancer根据user-service到eureka拉取服务列表
-
eureka返回列表,localhost:8081、localhost:8082
-
IRule利用内置负载均衡规则,从列表中选择一个,例如localhost:8081
-
RibbonLoadBalancerClient修改请求地址,用localhost:8081替代userservice,得到http://localhost:8081/user/1,发起真实请求
2.负载均衡策略
负载均衡的规则都定义在IRule接口中,而IRule有很多不同的实现类:
不同规则的含义如下:
内置负载均衡规则类 | 规则描述 |
---|---|
RoundRobinRule | 简单轮询服务列表来选择服务器。它是Ribbon默认的负载均衡规则。 |
AvailabilityFilteringRule | 对以下两种服务器进行忽略: (1)在默认情况下,这台服务器如果3次连接失败,这台服务器就会被设置为“短路”状态。短路状态将持续30秒,如果再次连接失败,短路的持续时间就会几何级地增加。 (2)并发数过高的服务器。如果一个服务器的并发连接数过高,配置了AvailabilityFilteringRule规则的客户端也会将其忽略。并发连接数的上限,可以由客户端的<clientName>.<clientConfigNameSpace>.ActiveConnectionsLimit属性进行配置。 |
WeightedResponseTimeRule | 为每一个服务器赋予一个权重值。服务器响应时间越长,这个服务器的权重就越小。这个规则会随机选择服务器,这个权重值会影响服务器的选择。 |
ZoneAvoidanceRule | 以区域可用的服务器为基础进行服务器的选择。使用Zone对服务器进行分类,这个Zone可以理解为一个机房、一个机架等。而后再对Zone内的多个服务做轮询。 |
BestAvailableRule | 忽略那些短路的服务器,并选择并发数较低的服务器。 |
RandomRule | 随机选择一个可用的服务器。 |
RetryRule | 重试机制的选择逻辑 |
默认的实现就是ZoneAvoidanceRule,是一种轮询方案,简单理解为是你在哪个地区,就会有优先选择哪个地区的服务
3.自定义负载均衡策略
通过定义IRule实现可以修改负载均衡规则,有两种方式:
Ⅰ.代码方式:
在order-service(消费者)中的OrderApplication类中,定义一个新的IRule:
// 定义IRule修改负载均衡规则,方法1:全局
// 方法2在application.yml文件中
@Bean
public IRule randomRule() {
return new RandomRule();
}
Ⅱ.配置文件方式:
在order-service(消费者)的application.yml文件中,添加新的配置也可以修改规则:
# 定义IRule修改负载均衡规则,方法2:局部
userservice: # 给某个微服务配置负载均衡规则,这里是userservice服务
ribbon:
NFLoadBalancerRuleClassName: com.netflix.loadbalancer.RandomRule # 负载均衡规则
注意
- 一般用默认的负载均衡规则,不做修改。
- 是在消费者服务里面做配置,就代表你远程调用其他服务时采用哪种负载均衡策略
- 第一种方式是全局配置,不管你访问哪个服务都是使用你配置的这个策略
- 第二种方式是针对配置,你配置时会写明针对哪个服务进行配置的
4.饥饿加载
Ribbon默认是采用懒加载,即第一次访问时才会去创建LoadBalanceClient,请求时间会很长。而饥饿加载则会在项目启动时创建,降低第一次访问的耗时。
重启服务,第一次访问服务,发现时间为481毫秒
添加配置
ribbon:
eager-load:
enabled: true # 开启饥饿加载
clients: # 指定饥饿加载的服务名称
- userservice
# - xxservice 如有多个就需要这样子往下依次写
重启服务,这样第一次访问服务时,访问时间缩短为304毫秒
@大总结
Ⅰ.Ribbon负载均衡规则
- 规则接口是IRule
- 默认实现是ZoneAvoidanceRule,根据zone选择服务列表,然后轮询
Ⅱ.负载均衡自定义方式
- 代码方式:配置灵活,但修改时需要重新打包发布
- 配置方式:直观,方便,无需重新打包发布,但是无法做全局配置
Ⅲ.饥饿加载
- 开启饥饿加载
- 指定饥饿加载的微服务名称