目前Spring Cloud使用最多限流算法为漏桶算法和令牌桶算法。其中,令牌桶算法算是对漏桶算法的一种改进。
令牌桶算法优点:
稳定性高:令牌桶算法可以控制请求的处理速度,可以使系统的负载变得稳定
弹性好:令牌桶算法可以处理突发流量,可以在短时间内提供更多的处理能力,以处理突发流量。Guava的RateLimiter限流组件,就是基于令牌桶算法实现的。
缺点:
实现复杂:相对于固定窗口算法等其他限流算法,令牌桶算法的实现较为复杂,对短时请求难以处理:
在短时间内有大量请求到来时,可能会导致令牌桶中的令牌被快速消耗完,从而限流。这种情况下,便需要考虑使用漏桶算法。
时间精确要求高:令牌桶算法需要在固定的时间间隔内生成令牌,因此要求时间精确较高,如果系统时间不准确,可能会导致限流效果不理想。
因此,令牌桶算法核心一点在于,单位时间内生成的令牌数量固定不变,这是其主要不足之处,如果可以动态调整生成的令牌数量便可以有效地优化该算法。
因此构想如下:通过动态负载均衡策略实时监控服务节的负载值,当负载值小的时候,降低令牌生成数量,当负载值大的时候,提高令牌生成数量,以此提高令牌桶算法限流精度。设计如图所示。