异常检测介绍

异常检测是识别与正常数据不同的数据,用于发现如欺诈、故障等问题。本文介绍了异常检测的类别、任务分类和常见场景,如金融欺诈、工业异常等。详细探讨了基于统计学、线性模型和相似度的检测方法,如PCA、DBSCAN、k近邻和LOF算法,并提及了集成方法如孤立森林。此外,还提到了机器学习在有标签情况下的应用,并推荐了Scikit-learn和PyOD这两个异常检测的Python库。
摘要由CSDN通过智能技术生成

一、异常检测介绍

1、什么是异常检测

异常检测(Outlier Detection),顾名思义,是识别与正常数据不同的数据,与预期行为差异大的数据。
识别如信用卡欺诈,工业生产异常,网络流里的异常(网络侵入)等问题,针对的是少数的事件。

1.1 异常的类别

**点异常:**指的是少数个体实例是异常的,大多数个体实例是正常的,例如正常人与病人的健康指标;
**上下文异常:**又称上下文异常,指的是在特定情境下个体实例是异常的,在其他情境下都是正常的,例如在特定时间下的温度突然上升或下降,在特定场景中的快速信用卡交易;
**群体异常:**指的是在群体集合中的个体实例出现异常的情况,而该个体实例自身可能不是异常,例如社交网络中虚假账号形成的集合作为群体异常子集,但子集中的个体节点可能与真实账号一样正常。

1.2 异常检测任务分类

**有监督:**训练集的正例和反例均有标签
**无监督:**训练集无标签
**半监督:**在训练集中只有单一类别(正常实例)的实例,没有异常实例参与训练

1.3 异常检测场景

故障检测
物联网异常检测
欺诈检测
工业异常检测
时间序列异常检测
视频异常检测
日志异常检测
医疗日常检测
网络入侵检测

2、异常检

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值