分布式环境下限流器springboot实现,令牌桶

令牌桶算法:

生产逻辑:程序以恒定的速率产生令牌,然后把令牌放到令牌桶中,令牌桶有一个容量,当令牌桶满了的时候,无法再向桶中放置令牌;

消费逻辑:当想要处理一个请求的时候,则从令牌桶中取出一个令牌,如果此时令牌桶中没有令牌,那么则拒绝处理请求。

优点:既能限制数据的平均传输速率,又能允许某种程度的突发传输;

在这里插入图片描述

算法实现:

引入依赖

        <dependency>
            <groupId>org.redisson</groupId>
            <artifactId>redisson</artifactId>
            <version>3.14.1</version>
        </dependency>

令牌桶工具类

import com.google.common.base.Preconditions;
import com.google.common.cache.Cache;
import com.google.common.cache.CacheBuilder;
import lombok.SneakyThrows;
import org.apache.commons.lang.StringUtils;
import org.redisson.api.RRateLimiter;
import org.redisson.api.RateIntervalUnit;
import org.redisson.api.RateType;
import org.redisson.api.RedissonClient;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Component;

import java.util.Optional;
import java.util.concurrent.Callable;
import java.util.concurrent.TimeUnit;

/**
 * 按数据库配置对其进行限流
 */
@Component
public class RedisRateLimiter {

    @Autowired
    private RedissonClient redissonClient;

    // ratelimiter缓存容器
    private static Cache<String, Optional<RRateLimiter>> rrLimiterCache = CacheBuilder.newBuilder()
            .expireAfterWrite(5, TimeUnit.MINUTES)
            .build();

    /**
     * 通用法
     *
     * @param key
     * @return
     */
    public boolean acquire(String key, int num, int interval) {
        //acquire
        RRateLimiter rrLimiter = getRrLimiter("RateLimiter_" + key, num, interval);
        return rrLimiter.tryAcquire();
    }

    /**
     * 获取流限器
     *
     * @param key
     * @param num      令牌数
     * @param interval 时间窗口大小
     * @return
     */
    @SneakyThrows
    private RRateLimiter getRrLimiter(String key, int num, int interval) {
        //如不存在相应的limiter,进行新建
        return rrLimiterCache.get(key, new Callable<Optional<RRateLimiter>>() {
            @Override
            public Optional<RRateLimiter> call() {
                RRateLimiter rateLimiter = redissonClient.getRateLimiter(key);
                rateLimiter.setRate(RateType.OVERALL, num, interval, RateIntervalUnit.SECONDS);
                //如果不存在,进行放置
                return Optional.of(rateLimiter);
            }
        }).get();
    }

    @SneakyThrows
    public RRateLimiter getFowIdLimit(String key) {
        //如不存在相应的limiter,进行新建
        return rrLimiterCache.get(key, new Callable<Optional<RRateLimiter>>() {
            @Override
            public Optional<RRateLimiter> call() {
                RRateLimiter rateLimiter = redissonClient.getRateLimiter(key);
                // 1秒一个
                rateLimiter.setRate(RateType.OVERALL, 5, 1, RateIntervalUnit.SECONDS);
                //如果不存在,进行放置
                return Optional.of(rateLimiter);
            }
        }).get();
    }
}

具体使用:

 // 获取到命名为key的令牌桶
 RRateLimiter rateLimiter = redisRateLimiter.getFowIdLimit(key);

 // 判断是否能够取到令牌
 if (rateLimiter.tryAcquire()) {
     // 处理请求
     sendMessage(webHookRequest, flowDefinitions, appID, customerID, eventType);
 } else {
     // 拒绝请求
     saveHookUrl(webHookRequest, flowDefinitions, appID, customerID,
             eventType, StatusCodeEnum.LIMITED.getCode());
 }

可以看出,单机环境和分布式限流器的不同在于:对令牌桶的实现方法不同。单机环境下所有的令牌都生成在内存中,是JVM级别的限流;当令牌生产方式变为redis,便做到了分布式环境下的限流。

学习心得:
根据令牌桶算法,桶中的令牌是持续生成存放的,需要先从桶中拿到令牌才能开始执行请求,那么持续生成令牌存放应该这么实现呢?

一般实现:开启一个定时任务,由定时任务持续生成令牌。
缺点:每维护一个令牌桶都需要创建一个任务,会极大的消耗系统资源。如某接口需要分别对每个用户做访问频率限制,假设系统中存在100W用户,则可能需要开启100W个定时任务来维持每个桶的令牌数。

RRateLimiter实现:延迟计算法,具体函数如下。

/**
 * Updates {@code storedPermits} and {@code nextFreeTicketMicros} based on the current time
 */
void resync(long nowMicros) {
    // if nextFreeTicket is in the past, resync to now
    if (nowMicros > nextFreeTicketMicros) {
      double newPermits = (nowMicros - nextFreeTicketMicros) / coolDownIntervalMicros();
      storedPermits = min(maxPermits, storedPermits + newPermits);
      nextFreeTicketMicros = nowMicros;
    }
}

基于当前时间,更新下一次请求令牌的时间,以及当前存储的令牌(即生成令牌),这样一来,只需要在获取令牌时计算一次即可。

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
在 Spring Boot 中,我们可以使用 AOP(面向切面编程)和拦截的方式来实现接口限流。以下是一个简单的实现方式: 1. 引入 Guava 库,它包含了令牌桶算法和漏斗算法的实现。 2. 定义一个注解 `@RateLimit`,用来标记需要进行限流的接口。 ```java @Target(ElementType.METHOD) @Retention(RetentionPolicy.RUNTIME) public @interface RateLimit { int value() default 100; // 默认每秒限制100个请求 } ``` 3. 定义一个切面 `RateLimitAspect`,在接口被调用时进行限流检查。 ```java @Aspect @Component public class RateLimitAspect { private final RateLimiter rateLimiter = RateLimiter.create(100.0); // 每秒100个请求 @Around("@annotation(rateLimit)") public Object limit(ProceedingJoinPoint joinPoint, RateLimit rateLimit) throws Throwable { if (rateLimiter.tryAcquire(rateLimit.value(), TimeUnit.MILLISECONDS)) { return joinPoint.proceed(); } else { throw new RuntimeException("接口限流,请稍后再试!"); } } } ``` 4. 在接口方法上添加 `@RateLimit` 注解,指定每秒允许的请求个数。 ```java @RestController public class DemoController { @GetMapping("/demo") @RateLimit(10) // 每秒限制10个请求 public String demo() { return "Hello World!"; } } ``` 以上代码实现了一个简单的接口限流功能,可以根据实际需求进行调整。需要注意的是,这种方式只适用于单机部署的场景,如果是分布式部署的系统,需要考虑使用分布式限流方案。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值