机器学习笔记 (1)-线性回归模型

参考资料

• 《机器学习》-周志华
• 《寒小阳机器学习讲义》-寒小阳
• 《统计学习方法》-李航

摘要

机器学习包含监督学习、非监督学习、以及强化学习三大部分。监督学习又分为分类和回归两大类。线性回归模型就属于监督学习里的回归模型。

正文

1. 定义

线性回归模型

通过属性的线性组合进行预测的函数，即
$f(x) = w_1.x_1 + w_2.x_2 + w_3.x_3 +... + w_n.x_n+b$

向量形式为：$f(x) = w^T*x + b$
其中 w=(w1,w2,