异常检测简单认识

异常检测涉及识别与正常数据不同的实例,包括点异常、条件异常和群体异常。任务分为有监督、无监督和半监督。常见场景有故障检测、医疗检测等。挑战包括样本不平衡和区分异常与噪音。基础方法包括统计学、线性模型和基于相似度的方法,如PCA、DBSCAN和LOF。集成方法如Feature Bagging和孤立森林,以及机器学习模型在有标签情况下使用。
摘要由CSDN通过智能技术生成

1.基本概念

异常检测(Outlier Detection),可以理解为识别与正常数据不同的数据或与预期行为差异大的数据,针对少数事件。

异常的类别:

点异常(point anamalies):只有少数的实例异常

条件异常(conditional anamalies):实例的异常与否与情境有关,指特定情境下的实例是异常的

群体异常(group anomalies):实例本身可能不是异常,但其所在的群体是异常的

任务分类:

有监督、无监督、半监督(训练集中只有正例,异常实例不参与训练)

场景:

故障检测、医疗日常检测、网络入侵检测、欺诈检测、工业异常检测、时间序列异常检测、视频异常检测、日志异常检测

难点:

(1)异常数据量少,属于样本不平衡问题(是否可尝试使用处理样本不平衡的方法来解决?)

(2)有时很

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值