曲线聚类_[技术分享]用于大规模异常检测的KPI的稳健快速聚类

本文介绍了清华大学2018年的研究,聚焦于在高噪声和异常情况下快速聚类KPIs以进行大规模异常检测。算法包括数据预处理、基线提取、基于SBD的相似性度量和DBSCAN聚类。尽管存在计算效率问题,但ROCKA算法在聚类效果上表现出色,尤其是在将时序曲线分配到相似类别中。
摘要由CSDN通过智能技术生成

113ec496fbe7ba7231407f6f609478be.png

本篇文稿,主要介绍2018年清华大学发表的关于快速时序聚类的文章《Robust and Rapid Clustering of KPIs for Large-Scale Anomaly Detection》的具体算法思路和整体流程。

问题复杂度

KPI本质上是一种时序数据,对KPI的聚类主要面临两种挑战:

  1. KPI曲线上的噪声、异常、相位差和振幅(量纲)差异通常会改变KPI曲线的形态,从而影响相似性的判别,难以使传统方法实现快速准确的聚类;
  2. 一条KPI曲线通常包括上万个数据点,时间跨度从几天到数周,从而完整的刻画了其曲线模式。因此,KPI曲线通常具有较高的维度。具体的数据形态如下所示:
    1. 噪声和异常:曲线上与正常值不符的波动
    2. 振幅差异:KPI曲线可能具有不同量级的振幅
    3. 相位差异:两条KPI曲线可能具有不同量级的振幅

1cfbc105b2d905f94fd13c98927899ef.png
算法需要处理的问题场景
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值