本文来自《老饼讲解-BP神经网络》https://www.bbbdata.com/
最小二乘法是基本的线性求解问题之一,本文介绍最小二乘法的原理,和最小二法求解公式的推导
一、什么是最小二乘法
下面简单讲述最小二乘问题与最小二乘法求解公式。
1.1. 什么是最小二乘法
现有A,b,求一x,使得Ax与b的误差最小,即:
min E ( x ) = ( A x − b ) T ( A x − b ) \displaystyle \text{min}\textbf{E}(x) =(Ax-b)^T(Ax-b) minE(x)=