![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
岭回归
Wind_know
这个作者很懒,什么都没留下…
展开
-
线性回归,岭回归,套索回归等等
目录 岭回归 原理 缩减系数来“理解”数据 优点 总结 小结 应用场景 代码实现 导包 样本小于特征,无数个解 打乱索引 矩阵乘法 比较三种算法 计算斜率 岭回归alpha最优化 导包 设X矩阵 设y 岭回归拟合 画图表示 alpha和coefs的关系 岭回归 原理 缩减系数来“理解”数据 优点 缩减方法可以去掉不重要的参数,因此能更好地理解数据。此外,与简单的线性回归相比,缩减法能取得更好的预测效果 岭回归是加了二阶正则项的最小二乘,主要适.原创 2020-07-02 20:23:51 · 1065 阅读 · 0 评论 -
其他线性回归,岭回归等
普通最小二乘法 范数 范数(norm)是数学中的一种基本概念。在泛函分析中,它定义在赋范线性空间中,并满足一定的条件,即①非负性;②齐次性;③三角不等式。它常常被用来度量某个向量空间(或矩阵)中的每个向量的长度或大小。将数视为向量。 当p取1,2,无穷的时候分别是以下几种最简单的情形: 1-范数:║x║1=│x1│+│x2│+…+│xn│ 2-范数:║x║2=(│x1│2+│x2│2+…+│xn│2)1/2 ∞-范数:║x║∞=max(│x1│,│x2│,…,│xn│) 其中2-.原创 2020-06-30 22:30:20 · 266 阅读 · 0 评论