机器学习之线性模型

基本形式

给定由d个属性描述的示例x=(x1; x2; …; xd)，其中xi是x在第i个属性上的取值，线性模型（linear model）试图学得一个通过属性的线性组合来进行预测的函数，即

写成向量形式即

• 确定w与b后模型即随之确定
• 非线性模型（nonlinear model）可在线性模型基础上通过引入层级结构或高维映射得到
• 线性模型具有很好的解释性（comprehensibility）

线性回归

线性回归（linear regression）目的即确定一个w和b，是的f(x)与y的均方误差最小化。

• 均方误差对应欧几里得距离即欧氏距离（E