深入理解Prometheus rate irate increase

转自 https://zhuanlan.zhihu.com/p/481010662

在上一篇《深入理解Prometheus metric type》已经介绍了Counter类型，其值只会上升，它表示累积的总计数，例如“我们总共处理了多少请求？”或“我们花了多少秒处理请求？”。由于计数器的值取决于跟踪和公开它的进程的初始（重新）启动时间，因此计数器的绝对值几乎没有用处。因此，在用计数器绘制图形或做任何其他事情之前，您通常希望将其包装在类似rate(),的函数中irate()，或者increase()查看计数器上升的速度。这三个函数的确切行为经常引起混淆，因此在这篇文章中，我们将详细介绍它们中的每一个，以及它们如何处理计数器重置并进行数据推理获得最终值。

概述
以下是计算计数器增长率的三个函数之间差异的概述：

rate()：计算每秒的增长率，在整个提供的时间窗口内平均。示例：rate(http_requests_total[5m])在 5 分钟的时间窗口内产生每秒 HTTP 请求的平均速率。这个函数是最常见的，因为它产生了一个很好的平滑速率和一个可预测的每秒输出单位。
irate()(“instant rate”)：计算每秒的增长率，就像计算一样rate()，但只考虑在提供的时间窗口下的最后两个样本进行计算，并忽略所有较早的样本。示例：irate(http_requests_total[5m])查看提供的 5 分钟窗口下的最后两个样本，并计算它们之间的每秒增长率。如果您想使放大的图表显示对速率变化的快速响应，此功能会很有帮助，但输出会比 for 更加尖锐。
increase(): 这个函数完全等同于，rate()除了它不将最终单位转换为“每秒”( 1/s)。相反，最终的输出单元是每个提供的时间窗口。示例：increase(http_requests_total[5m])产生在 5 分钟窗口内处理的 HTTP 请求的总增加量（单位：1 / 5m）。因此increase(foo[5m]) / (5 * 60)100% 等价于rate(foo[5m])。
所有三个函数都要求在提供的范围窗口下至少需要两个样本才能工作。窗口下少于两个样本的系列会简单地从结果中删除。在给定固定时间窗口和落在该窗口下的一些数据点的情况下，如何准确计算增加是一个权衡和不完美近似的问题。Prometheus 选择的方法旨在平均提供最正确的答案，仅考虑提供的窗口下的有限数据。让我们更详细地看看它是如何做到的：

数据推测（拟合）
经常让人们感到困惑的是rate()和increase()函数的推算行为。例如，即使对于只有整数增量的计数器，increase()也可以返回非整数结果2.5883。原因是它试图在指定时间窗口的总持续时间（例如 5 分钟）内尝试近似计数器的增加。但实际上，在时间窗口下找到的第一个和最后一个样本永远不会 100% 与提供的时间窗口的开始和结束重合。因此increase(foo[5m]) 将窗口下的第一个和最后一个数据点之间的斜率延伸到窗口边界，以得出一个平均接近整个窗口的预期增加的值（实际上在窗口边界处确实有样本）。

下图显示了一个使用rate()1 分钟窗口和间隔 15 秒的样本的示例，在窗口下方发生了一个实际计数器增加1：

如图所示，结果基于窗口下第一个和最后一个样本之间的斜率并推测到窗口边界。

注意：这种行为有一些例外：当一个系列看起来像是在提供的时间窗口内开始或结束时，我们不希望在系列终止的方向上推测太远。rate()和increase()预测第一个或最后一个样本距离其各自窗口边界的距离超过窗口下样本之间的平均间隔的 1.1 倍时停止。在这种情况下，推测仅向窗口边界延伸平均采样间隔的一半，而不是一直延伸。类似地，这些函数避免推测到负值，因为计数器总是从0并且永远不会是负面的。

由于irate()实际上只查看两个样本之间的每秒增加量，因此它不会进行任何这种推测。

计数器重置
尽管计数器通常只会上升，但它们会0在跟踪它们的进程重新启动时重置。为了不将这些重置解释为实际的负利率，与计数器相关的函数具有检测和处理这些重置的逻辑：在提供的时间窗口下迭代样本时，函数检查是否有任何样本的值低于前一个，并将这种情况解释为计数器重置。使用计数器总是在复位后开始的进一步假设0，这些函数然后只是将新的样本值添加到先前看到的样本值，以补偿复位。

以下示例图显示了rate()计算如何处理在提供的窗口下发生的计数器重置。您可以将其想象为rate()从底层的“真实”样本创建一组“虚拟”样本。然后根据虚拟样本计算最终速率，就好像从未发生过重置一样：

注意：每当计数器重置时，它有可能在Prometheus 上次抓取之后但在重置之前递增。Prometheus 永远失去了这些增量，并且无法将它们取回。为了最大限度地减少这种影响，重置应该只偶尔发生一次，并且比 Prometheus 抓取目标的频率要低得多。