14. Sentinel滑动时间窗口算法源码解析

上节课我们分析了Sentinel的滑动时间窗口算法原理,那么这节课我们来研究一下源码中的具体实现

1. Sentinel中使用滑动时间窗的流程图

从图中可以看出Sentinel在各种地方都使用了时间窗提供的数据。 也是依赖Sentinel的StatisticSlot提供数据由时间窗记录下来。

2. 源码入口分析

首先看StatisticSlot.entry方法中node.addPassRequest(count)方法,这里我之前就提到过用到了滑动窗口算法,那我们来具体分析

// StatisticSlot.java
@Override
public void entry(Context context, ResourceWrapper resourceWrapper, DefaultNode node, int count,
                  boolean prioritized, Object... args) throws Throwable {
    ...
    // 通过滑动窗口添加线程数
    node.increaseThreadNum();
    // 通过滑动窗口添加请求数
    node.addPassRequest(count);
    ...
}

//通过以上方法调用进入DefaultNode.addPassRequest方法
// DefaultNode.java
@Override
public void addPassRequest(int count) {
    super.addPassRequest(count);
    this.clusterNode.addPassRequest(count);
}

//通过以上方法调用进入StatisticNode.addPassRequest方法
// StatisticNode.java
@Override
public void addPassRequest(int count) {
    // 按秒滑动统计
    rollingCounterInSecond.addPass(count);
    // 按分钟滑动统计
    rollingCounterInMinute.addPass(count);
}

//通过以上方法调用进入ArrayMetric.addPass方法
// ArrayMetric.java
@Override
public void addPass(int count) {
    // 获取当前时间点所在的样本窗口,这里的data对象实际上是LeapArray<MetricBucket>对象
    WindowWrap<MetricBucket> wrap = data.currentWindow();
    // 将当前请求的计数量添加到当前样本窗口的统计数据中
    wrap.value().addPass(count);
}

这里就会进入LeapArray(环形数组)中的currentWindow方法中,这个环形数组,其实就是Sentinel官方提供的原理图中的环形数组WindowLeapArray

3. 环形数组时间窗相关类

// 环形数组
public abstract class LeapArray<T> {
    // 样本窗口长度
    protected int windowLengthInMs;
    // 一个时间窗中包含的时间窗数量
    protected int sampleCount;
    // 时间窗长度
    protected int intervalInMs;
    private double intervalInSecond;
 
    // 这个一个数组,元素为WindowWrap样本窗口
    // 注意,这里的泛型 T 实际为 MetricBucket 类型
    protected final AtomicReferenceArray<WindowWrap<T>> array;
 ......   
}  

// 样本窗口包装类
public WindowWrap(long windowLengthInMs, long windowStart, T value) {
    //样本窗口长度
    this.windowLengthInMs = windowLengthInMs;
    //样本窗口的起始时间戳
    this.windowStart = windowStart;
    //当前样本窗口的统计数据 其类型为MetricBucket,包含了多维度的数据
    this.value = value;
}

当ArrayMetric.addPass方法中调用data.currentWindow();时进入LeapArray滑动数组方法<br />

//LeapArray.java
public WindowWrap<T> currentWindow() {
    // 获取当前时间所在的样本窗口
    return currentWindow(TimeUtil.currentTimeMillis());
}
// 根据时间获取样本窗口
public WindowWrap<T> currentWindow(long timeMillis) {
    if (timeMillis < 0) {
        return null;
    }
    // 计算时间所在的样本窗口id,即在计算数组LeapArray中的索引
    int idx = calculateTimeIdx(timeMillis);
    // 计算当前样本窗口的开始时间点
    long windowStart = calculateWindowStart(timeMillis);
    .....
}
private int calculateTimeIdx(long timeMillis) {
    // 计算当前时间在那个样本窗口(样本窗口下标),当前时间/样本窗口长度
    long timeId = timeMillis / windowLengthInMs;
    // 计算具体索引,这个array就是装样本窗口的数组
    return (int)(timeId % array.length());
}
//获得timeMillis时间所在窗口的开始时间
protected long calculateWindowStart(long timeMillis) {
    //当前时间 减去 当前时间除以样本窗口的长度的的余数
    return timeMillis - timeMillis % windowLengthInMs;
}

timeId(样本窗口下标)原理如下:

正在上传…重新上传取消正在上传…重新上传取消

在环形数组中的下标计算原理图:

4. 样本窗口获取流程分析

当我们拿到样本窗口在环形数组的下标和样本窗口的开始时间后,是如何获得或创建样本窗口的呢? 接下来我们分析这一部分。

通过以下代码可以看出,这里开启了一个死循环,直到获取到样本窗口才退出循环,因为多线程操作,可能其他线程也才操作这个环形数组。 所以这个死循环是必要的。在这个死循环中,会产生以下几种情况

  1. 在环形数组中找不到样本窗口

    这种情况一般发生在程序刚刚运行的时候,需要创建一个样本窗口放入环形数组对应的下标中

  2. 找到样本窗口并且样本窗口开始时间和需要的样本开始时间一致

    则说明要找的样本窗口就是当前数组中索引对应的样本窗口,可返回直接使用。

  3. 找到样本窗口,但需要的样本窗口开始时间大于找到的样本窗口开始时间

    这种情况其实是最常见的, 说明找到的样本窗口过时了,需要对样本窗口reset后重新使用(这里避免了重新创建各种对象,会变得更高效,这也是环形数组的特性)

  4. 找到样本窗口,但需要的样本窗口开始时间小于找到的样本窗口开始时间

    首先基本不会出现这种情况,因为时间不会倒流,除非人为系统调快了时间。 所以这里的逻辑是一个兜底的方法,这里采用了直接创建一个游离在环形数组外的样本窗口返回

while (true) {
    // 获取到当前时间所在的样本窗口
    WindowWrap<T> old = array.get(idx);
    // 如果获取不到,表示没有创建
    if (old == null) {
        // 创建新的时间窗口
        WindowWrap<T> window = new WindowWrap<T>(windowLengthInMs, windowStart, newEmptyBucket(timeMillis));
        // 通过CAS方式将新建窗口放入Array
        if (array.compareAndSet(idx, null, window)) {
            return window;
        } else {
            Thread.yield();
        }
    } else if (windowStart == old.windowStart()) {
        // 若当前样本窗口的起始时间点与计算出的样本窗口起始点相同,则说明两个是同一个样本窗口
        return old;
    } else if (windowStart > old.windowStart()) {
        // 若当前样本窗口的起始时间点 大于 计算出的样本窗口起始时间点,说明计算出的样本窗口已经过时了,
        // 需要将原来的样本窗口替换
        if (updateLock.tryLock()) {
            try {
                // 替换掉老的样本窗口
                return resetWindowTo(old, windowStart);
            } finally {
                updateLock.unlock();
            }
        } else {
            Thread.yield();
        }
    } else if (windowStart < old.windowStart()) {
        // 当前样本窗口的起始时间点 小于 计算出的样本窗口起始时间点,
        // 这种情况一般不会出现,因为时间不会倒流。除非人为修改了系统时钟
        return new WindowWrap<T>(windowLengthInMs, windowStart, newEmptyBucket(timeMillis));
    }
}

5. 样本窗口获取流程图

6. 样本窗口重置

在上面获取样本窗口逻辑中,其中第3点中,有一个重置样本窗口逻辑,我们看看它是如何实现的呢

// BucketLeapArray.java
@Override
protected WindowWrap<MetricBucket> resetWindowTo(WindowWrap<MetricBucket> w, long startTime) {
    // 更新样本窗口起始时间
    w.resetTo(startTime);
    // 将多维度统计数据清零
    w.value().reset();
    return w;
}

// MetricBucket.java
private final LongAdder[] counters;
// 更新数据分析
public MetricBucket reset() {
    // 将每个维度的统计数据清零
    for (MetricEvent event : MetricEvent.values()) {
        counters[event.ordinal()].reset();
    }
    initMinRt();
    return this;
}

其实就是将多维度的数据清零,然后修改样本窗口的开始时间就可以了。

7. 统计滑动窗口数据维度

最后我们再来看一下具体是那个维度,其实是通过维度

// MetricBucket.java
public void addPass(int n) {
    add(MetricEvent.PASS, n);
}

// MetricEvent.java
public enum MetricEvent {
    // 通过数维度
    PASS,
    // 流控数维度
    BLOCK,
    // 异常数维度
    EXCEPTION,
    //成功的请求数,在StatisticSlot.exit方法中调用
    SUCCESS,
    //响应总时间毫秒数,在StatisticSlot.exit方法中调用
    RT,
    /**
     * Passed in future quota (pre-occupied, since 1.5.0).
     */
    OCCUPIED_PASS
}

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值