python基础
文章平均质量分 95
qq_36818174
这个作者很懒,什么都没留下…
展开
-
Task05 异常检测_高维数据异常检测
主要内容包括: Feature Bagging 孤立森林 文章目录1、概念1.1 高维异常检测的解决方案1.2 方案介绍2、数据降维和维度选择3、Feature Bagging 1、概念 高维数据异常检测:现实生活中,一般一个数据集含有上千或者上万个维度,由于维护较多,有些异常很难识别出来。所以需要针对高维使用合适的异常检测方法。 1.1 高维异常检测的解决方案 1)如何做维度选择(或者降维)使得其在异常检测算法上运行效果比较好 2)如果分割子空间,有没有什么子空间分割常用的技巧/经验 3)若是高维度但又稀原创 2021-01-24 22:11:52 · 619 阅读 · 1 评论 -
Tasl04:异常检测之基于相似度的方法
#异常检测——基于相似度的方法 主要内容包括: 基于距离的度量 基于密度的度量 文章目录1、概述2、基于距离的度量 1、概述 “异常”通常是一个主观的判断,什么样的数据被认为是“异常”的,需要结合业务背景和环境来具体分析确定。实际上,数据通常嵌入在大量的噪声中,而我们所说的“异常值”通常指具有特定业务意义的那一类特殊的异常值。噪声可以视作特性较弱的异常值,没有被分析的价值。噪声和异常之间、正常数据和噪声之间的边界都是模糊的。异常值通常具有更高的离群程度分数值,同时也更具有可解释性。 在普通的数据处理中,原创 2021-01-21 20:47:07 · 145 阅读 · 0 评论 -
Task03 异常检测之线性模型
1、概述 异常检测真实数据集中不同维度的数据通常具有高度的相关性,这是因为不同的属性往往是由相同的基础过程以密切相关的方式产生的。在古典统计学中,这被称为——回归建模,一种参数化的相关性分析。 1.1 线性回归 相关性分析:试图通过其他变量预测单独的属性值,一般依据正常值训练出一个模型,然后测试集利用这个模型的值来训练区分哪些为异常数据。 线性回归的定义是:目标值预期是输入变量的线性组合。线性模型形式简单、易于建模,但却蕴含着机器学习中一些重要的基本思想。线性回归,是利用数理统计中回归分析,来确定两种或两原创 2021-01-19 01:13:57 · 239 阅读 · 0 评论 -
Task02:异常检测基于统计学的方法
1、统计学异常检测 概述:通常使用统计学进行异常检测,一般要先依据数据训练一个模型,然后依据模型来评估数据是否异常。 1.1 统计学常用方法 1.1.1 z 分数(标准化) 概念:z分数(z-score),也叫标准分数(standard score)是一个数与平均数的差再除以标准差的过程。在统计学中,标准分数是一个观测或数据点的值高于被观测值或测量值的平均值的标准偏差的符号数。 如何使用z分数判断异常点:如果将数据进行z分数转化后,其得到的值的绝对值大于三倍标准差,就认为这个样本异常,属于离群点。 1.1.原创 2021-01-16 00:43:06 · 621 阅读 · 0 评论 -
Task01:异常检测介绍
1、异常检测 异常检测(Outlier Detection)概述:一般一个数据集包含正常数据和异常数据,正常数据占总数据集较大部分,分布比较均衡,而异常数据一般占总数据集较少部分,分布较分散。 生活中的异常:工业生产异常导致异常数据,信用卡漏洞,网络流混进的异常(网络入侵相关的数据注入),一般可能为人为的导致,机器导致,银行欺诈行为、药品问题、结构缺陷、设备故障。 1.1 异常检测分类 有监督:既有特征值+目标值,有准确的异常测试集以及结果和正常测试集以及导致结果,即可通过训练来进行预测结果,从而规避异常。原创 2021-01-10 23:43:34 · 449 阅读 · 2 评论 -
2020-10-29
1. Kevin商城 django安装 : 创建django环境:pip install pymysql -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com 升级pip安装源:python -m pip install --upgrade pip -i https://pypi.douban.com/simple 创建django项目:django-admin startproject kevinshop1 创建应用:python原创 2020-10-29 20:59:51 · 117 阅读 · 0 评论 -
Python基础2
1.if 语句 if 语句: if expression: expr_true_suite if-else语句: if expression: expr_true_suite else: expr_false_suite if - elif - else 语句: if expression1: expr1_true_suite elif expression2: expr2_true_suite . . elif expressionN:原创 2020-07-23 23:50:55 · 87 阅读 · 0 评论 -
Python基础1
1.注释 注释分为单行注释和多行注释。 单行注释使用:# 多行注释使用:’’’ ‘’’'或者""" “”" 2.算数运算符 算数运算符有:+ ,- ,* ,/ ,//整除, %求余, ** 幂 以及比较运算符, 逻辑运算符:and,or,not 位运算符: 操作符 名称 示例 ~ 按位取反 ~4 & 按位与 4 & 5 | 按位或 4 | 5 ^ 按位异或 4 ^ 5 << 左移 4 << 2 右移 4 >> 2 print(bin(4))原创 2020-07-21 09:26:04 · 112 阅读 · 0 评论