1、怎样的拟合直线最好?——与所有点都近,即与所有点的距离之和最小。
最小二乘法可以帮助我们在进行线性拟合时,如何选择“最好”的直线。要注意的是,利用实验数据进行拟合时,所用数据的多少直接影响拟合的结果,从理论上说,数据越多,效果越好,即所估计的直线方程越能更好地反映变量之间的关系。一般地,我们可以先作出样本点的散点图,确认线性相关性,然后再根据回归直线系数的计算公式进行计算。
2、刻画样本点与直线y=a+bx之间的“距离”——
思考:①这个“距离”与点到直线的距离有什么关系?
很显然,这个式值越小,则样本点与直线间的距离越小。
②为什么不直接利用点到直线的距离来刻画样本点与直线之间的距离关系?
3、最小二乘法
如果有n个点:(x1,y1),(x2,y2),(x3,y3),……,(xn,yn),我们用下面的表达式来刻画这些点与直线y=a+bx的接近程度:
。
使得上式达到最小值的直线y=a+bx就是我们所要求解的直线,这种方法称为最小二乘法。
4、线性回归方程