Lucifer_zzq的博客

原创 数学干货——最小二乘问题（线性空间求解以及矩阵求解）

最小二乘是一个最简单的二次型凸优化问题，在不考虑约束问题时，方式式可写为：其解为：x的求解方法可以有不同的理解，在这里详细讲述线性代数法和矩阵求导求解法。一、线性代数法：假设A=（m×n）大小的一个矩阵，我们将其理解为一个由n个m维的基向量长成的子空间。其解x=（n×1），为n个基向量的组合系数。也就是Ax为A长成的子空间上的一个向量。b=（m×1），是一个在空间上的任意向量。...