回归
Wind_know
这个作者很懒,什么都没留下…
展开
-
回归人脸自动补全
导包import numpy as npimport matplotlib.pyplot as plt%matplotlib inline# 构建方程from sklearn.linear_model import LinearRegression,Ridge,Lasso# 构建方程???from sklearn.neighbors import KNeighborsRegressorfrom sklearn.tree import DecisionTreeRegressor原创 2020-07-08 09:44:18 · 385 阅读 · 0 评论 -
逻辑斯蒂回归原理及其概率计算
逻辑斯蒂回归利用Logistics回归进行分类的主要思想是:根据现有数据对分类边界建立回归公式(f(x1,x2....))=w1x1+w2x2+.......),以此分类。这里的“回归”一词源于最佳拟合,表示要找到最佳拟合参数集。Logistic Regression和Linear Regression的原理(函数:二乘法(y-wx)^2,最小)是相似的,可以简单的描述这样的过程。原理过程预测函数原理代码实现import numpy as npX = ..原创 2020-07-03 22:45:45 · 3111 阅读 · 1 评论 -
线性回归,岭回归,套索回归等等
目录岭回归原理缩减系数来“理解”数据优点总结小结应用场景代码实现导包样本小于特征,无数个解打乱索引矩阵乘法比较三种算法计算斜率岭回归alpha最优化导包设X矩阵设y岭回归拟合画图表示 alpha和coefs的关系岭回归原理缩减系数来“理解”数据优点缩减方法可以去掉不重要的参数,因此能更好地理解数据。此外,与简单的线性回归相比,缩减法能取得更好的预测效果岭回归是加了二阶正则项的最小二乘,主要适.原创 2020-07-02 20:23:51 · 1023 阅读 · 0 评论 -
其他线性回归,岭回归等
普通最小二乘法范数范数(norm)是数学中的一种基本概念。在泛函分析中,它定义在赋范线性空间中,并满足一定的条件,即①非负性;②齐次性;③三角不等式。它常常被用来度量某个向量空间(或矩阵)中的每个向量的长度或大小。将数视为向量。当p取1,2,无穷的时候分别是以下几种最简单的情形:1-范数:║x║1=│x1│+│x2│+…+│xn│2-范数:║x║2=(│x1│2+│x2│2+…+│xn│2)1/2∞-范数:║x║∞=max(│x1│,│x2│,…,│xn│)其中2-.原创 2020-06-30 22:30:20 · 234 阅读 · 0 评论 -
回归--实践
回归问题解决分类?Logistic回归Logistic回归参数估计逻辑回归一般做二分类。对数线性模型,广义的线性模型。对数的是线性的,证明得到的p就是sigmod函数+线性模型Logistic回归的损失函数沿似然函数正梯度上升...原创 2020-06-07 22:33:22 · 136 阅读 · 0 评论 -
回归--理论
函数的输出可以是一个连续的值(称为回归),或是输出是有限个离散值(称作分类)。线性回归如何确定k,b ?为截距,x,y为给定的样本,这个模型其实就是线性回归的模型,用这个模型和样本确定θ1,θ2,θ0最佳的值,θ未知,x已知,公式:第i个样本实际的值=预测值+误差值高斯分布最大似然估计MLE最小二乘法的本质Logistic回归分类问题的首选算法多分类:Softmax回归目标函数技术点梯度下降算法最大似然估计特征选择...原创 2020-06-06 17:27:17 · 669 阅读 · 0 评论