异常检测小结

最新推荐文章于 2023-06-15 17:02:10 发布
最新推荐文章于 2023-06-15 17:02:10 发布
阅读量251 收藏
点赞数
分类专栏： Deep Learning 鼠鼠的AI笔记 文章标签： pytorch 深度学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u013302570/article/details/119524260
版权

这里写自定义目录标题

以下仅个人总结，若有不对的地方还望同志们留言告知。

Outlier重要吗？

Outlier在training 时体现的重要性没有在test的时候大。但是在以传统的用features去检查异常，即这里的outlier，training 用的loss function需要选择一下。

要将outlier找出来，则需要对应的Loss function。L1-norm 和 L2-norm(mean square error/MSE) 很常见，但是不一定对异常检测有帮助。从理论上说，L1-norm对outlier是不敏感的，L2-norm 对outlier又特别敏感，如果把L1-norm与L2-norm平衡一下，我们需要有一个loss function对outlier 敏感而又不会被带偏。那么可以尝试 smooth L1-norm loss。

s m o o t h L 1

了解本专栏 订阅专栏 解锁全文 超级会员免费看
EmoC001
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
订阅专栏
Java异常小结
08-04
另外，`throw`关键字用于手动抛出一个异常，这在检测到错误条件时非常有用。 异常处理不仅仅是简单的捕获和显示错误信息，它还可以帮助程序优雅地处理错误，避免程序崩溃，提供恢复机制，以及记录和调试错误。通过...
L2范数（L2 Norm）与均方差（MSE）
TsXor的博客
10-09 7717
没啥好说的，做个笔记！
电力专业常用英语
warmshepherd的专栏
02-25 9654
<br /> <br /> <br />Absorber Circuit       吸收电路 <br />ＡＣ／ＡＣ　Frequency Converter   交交变频电路 <br />AC power control　　　　　　　交流电力控制 <br />AC Power Controller　　　　　　交流调功电路 <br />AC Power Electronic Switch　　　　交流电力电子开关 <br />Ac Voltage Controller　　　　　　　交流调压电路 <br />A
MYSQL— perror 错误码详情
热门推荐
道行尚浅（老道）的博客
12-04 11万+
[root@localhost ~]# cat test_nothread.py import paramiko import threading import os def ssh2(ip,username,passwd,cmd): file_path='/root/perror.log' logfile=file(file_path,'a') try:
L1-norm (L1范数) L2-norm(L2范数)
w__Y__w的博客
12-08 1万+
L1-norm (L1范数) L2-norm(L2范数) 同样存在L0、L3等，L1、L2范数应用比较多。 一个向量的 norm 就是将该向量投影到 [0, ∞​) 范围内的值，其中 0 值只有零向量的 norm 取到。不难想象，将其与现实中距离进行类比，在机器学习中 norm 也就总被拿来表示距离关系：根据怎样怎样的范数，这两个向量距离多远。这里怎样怎样的范数就是范数的种类，即p-norm，严格定义为： 当p取1时被称为1-norm，也就是L1-norm，同理可得L2-norm。 L1..
ARM异常处理方法小结
08-03
以IRQ中断为例，当处理器检测到外部中断时，它会保存用户模式下的程序计数器（PC）到链接寄存器（LR），然后跳转到向量表的特定地址，通常是0x18，这里的指令通常是“B HandlerIRQ”，跳转到中断处理函数。...
VC++用法小结 全面总结
06-23
包括动态内存分配（new和delete操作）、内存泄漏检测以及智能指针的使用。 七、多线程编程 VC++支持多线程编程，可以利用Windows API或者C++11标准库中的thread类创建并管理线程，实现并发执行。 八、调试技巧 ...
异常检测算法综述PPT学习教案.pptx
10-02
基于距离的算法小结是：由于索引建立的开销很大，简单索引算法没有竞争性；当k时，基于单元的算法在N越大时优越性越明显；当k>=5之后，嵌套循环算法开始显现出优势。 然而，基于距离的算法也存在缺陷，例如输入参数...
PHP开发中常用的三个表单验证函数使用小结
12-18
1. `isset()`： `isset()` 函数用于检测变量是否已设置并且非NULL。这意味着它会返回true如果变量存在且其值不是NULL...在设计表单验证时，应始终考虑所有可能的边缘情况，并确保对所有可能的异常输入进行适当处理。
L2-norm 归一化有啥用？最简单的一个范数
NLP与推荐算法
01-13 6345
哈喽，各位大佬好，我是菜鸟小明哥，范数这个概念在研一学矩阵的时候有接触到，感觉不到有啥特别的地方，今天再次碰面？不知道这是什么安排？ 其实说到基本的俩范数：L1，L2范数，就要不可避免的提及测度距离，恰好，这里的L1范数就是曼哈顿距离，而L2范数就是欧氏距离，简单不？具体API如下： y=np.linalg.norm(x, axis=1, keepdims=True) 如果你不理解，比我还...
到底什么是L2 Norm
牛哥的博客
01-18 4万+
最近复现论文有这么一个结构： 池化之后有一个l2-norm。norm是normalization的缩写。ok，看看这是啥 标准化？正规化？归一化？… 正确答案 L2归一化：将一组数变成0-1之间。pytorch调用的函数是F.normalization。文档是这样写的： 对于L2来说，p=2，分母就是(x12+x22+...+xn2)\sqrt{( x_1^2 + x_2^2 + ... +...
有关l2,1范数作用的理解
开飞机的小毛驴儿
02-19 2万+
今天和导师讨论问题的时候，说到了l21范数。导数希望我能解释一下，我明白它的作用可是我知道我没有向老师解释清楚，有些失落。今晚就自己总结一下吧，希望下次再有人问我这个问题的时候我能向别人解释清楚。 先看上面l21范数的定义，注意原始矩阵是n行t列的，根号下平方是对列求和，也就是说是在同一行中进行操作的，根号部分就相当于一个l2范数，由此可以看出l21范数实则为矩阵X每一行的l2范数之和。
机器学习中的范数规则化之（一）L0、L1与L2范数
modabobo
05-04 7887
机器学习中的范数规则化之（一）L0、L1与L2范数 zouxy09@qq.com http://blog.csdn.net/zouxy09 今天我们聊聊机器学习中出现的非常频繁的问题：过拟合与规则化。我们先简单的来理解下常用的L0、L1、L2和核范数规则化。最后聊下规则化项参数的选择问题。这里因为篇幅比较庞大，为了不吓到大家，我将这个五个部分分成两篇博文。知识有限，以下都是我一些浅显的看法...
NT1_keras下搭建一个3层模型并且修改。
weixin_34220963的博客
06-01 2535
In [1]: import keraskeras.__version__C:\ProgramData\Anaconda3\lib\site-packages\h5py\__init__.py:36: FutureWarning: Conversion of the second argument of issubdtype from `float` to `np.floating`...
深度学习下分类任务中L2 norm总结
weixin_38208912的博客
01-03 7482
什么是L2范数？ L2范数既欧式距离，表示向量的元素平方和再开方 ∥x∥2=∑i=1nxi2\Vert x \Vert_{2} = \sqrt{\sum_{i=1}^{n}x_{i}^{2}}∥x∥2​=i=1∑n​xi2​​ 为什么使用L2 norm？ 对于CNN的输出，各个特征的模长均不一样， l2 norm是强行把同个维度的特征归一化。经过L2 norm的数据都处于0到1之间，距离就变得有一...
深度学习中L2 norm的使用
第二剑~的博客
07-02 4164
L2 norm其实是一个比较朴素的应用比较广泛的正则化算法，从过去的传统算法到现在的深度学习，从数据预处理到模型优化，都或多或少的会用到这个思想。其算法的过程也比较简单： 1.求出当前层数据的平方 2.求出当前层数据的平方和 3.将第一步得到的数据除以第二步得到的数据 这样一个简单的过程，会有什么作用呢？首先，经过L2 norm的数据都处于0到1之间。其次，经过L2 norm的数据之间的差异...
机器学习(拓展)L1,L2-Norm理解
黑洲非人lyf
04-04 2万+
首先理解范数的概念L1、L2这种在机器学习方面叫做正则化，统计学领域的人喊她惩罚项，数学界会喊她范数。范数(norm)是数学中的一种基本概念。在泛函分析中，它定义在赋范线性空间中，并满足一定的条件，即①非负性；②齐次性；③三角不等式。它常常被用来度量某个向量空间（或矩阵）中的每个向量的长度或大小。L1就是曼哈顿距离L2就是欧式距离再理解什么是稀疏矩阵在矩阵中，若数值为0的元素数目远远多于非0元素的...
python 加速(1)
最新发布
EmoC的博客
06-15 2509
因为要修改yolo系列里NMS处的计算，如果用python，速度巨慢。torchvision 有自己的加速后的NMS function。但是不和形变后的IOU通用。因此需要做一个类似的。回看torchvion, 发现里面有cpp的文件，因为之前没有接触过加速（资源比较丰富）。C++ 并不是加速NMS那步操作的解药，解药是CUDA kernel。因此，如果要加速任何的function在model里，CUDA kernel 是最终目的。自己之前误入歧途，以为C++就能加速一切。
小结入侵检测、入侵检测技术、入侵检测系统
04-30
入侵检测是指通过检测网络或计算机系统中的异常活动，以识别潜在的安全威胁。入侵检测技术包括基于特征的检测、基于行为的检测和基于统计的检测等。入侵检测系统是一种软件或硬件工具，用于自动化检测和报告网络或...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值