李航《统计学习方法》多项式函数拟合问题V2

最新推荐文章于 2022-10-16 22:25:42 发布

置顶

xiaolewennofollow

最新推荐文章于 2022-10-16 22:25:42 发布

阅读量1.2w

点赞数 21

分类专栏： python 机器学习文章标签： python 数据编程机器学习数据挖掘

本文链接：https://blog.csdn.net/xiaolewennofollow/article/details/46757657

版权

本文针对李航《统计学习方法》中的一项多项式函数拟合问题进行纠正，指出书中推导错误，并提供正确的推导过程。通过Python编程验证，展示了错误公式导致的拟合效果不佳。文章提供了高效的Python代码实现，包括3阶和9阶多项式拟合，对比展示原始数据生成函数与拟合函数的效果。

摘要由CSDN通过智能技术生成

最近在看李航的统计学习方法P11时发现一个多项式函数拟合问题觉得公式的推导有问题，于是看了一些资料发现这里的推倒是有错误的，用python编程验证后发现按书上的求导结果拟合后的函数图像完全不对，下面给出正确的推导结果和对应的python实现与拟合效果。

（第一次写了一版这篇博客，公式自己敲的，但是从别人那里贴的代码，后面感觉那个代码思路没问题，但就是进行了很多次重复计算，数据量大的时候效率低，而且很多地方对python的语言特性利用不足，写的有点类似C语言风格，比较晦涩。于是乎，把代码重写了一次，准备把文章撤下来重新贴自己的代码，这时候发现没有保存，前面用Tex敲的一堆公式就没了，心中顿时万马奔腾。。。。好在今天考试考完，强行克服拖延症把这篇文章重写一遍并附上重写的代码。）

下面开始正文

问题描述

假定给定一个训练数据集：

T = {(x 1, y 1), (x 2, y 2), \dots, (x N, y N)}

$T=\{(x_1,y_1),(x_2,y_2),\cdots,(x_N,y_N)\}$

其中， $x_i\in R$ 是输入 $x$ 的观测值， $y_i\in R$ 是相应的输出y的观测值， $i=1,2,\cdots,N$ ，多项式函数拟合的任务是假设给定数据由 $M$ 次多项式函数生成，选择最有可能产生这些数据的 $M$ 次多项式函数，即在 $M$ 次多项式函数中选择一个对已知数据以及未知数据都有很好预测能力的函数。