最小二乘法 最小二乘法没有约束条件,目标函数是若干项的平方和,每一项具有形式 a i ⊤ x − b i a_i^\top x-b_i ai⊤x−bi,具体形式如下: m i n f 0 ( x ) = ∥ A x − b ∥ 2 2 = ∑ i = 1 k ( a i ⊤ x − b i ) 2 min \quad f_0(x)=\| Ax-b\|^2_2=\sum_{i=1}^k (a_i^\top x-b_i)^2 minf0(x)=∥Ax−b∥22=i=1∑k(ai