西瓜书Task 2 线性回归

基本形式

向量元素用分号“; ”分隔：列向量，用逗号“ , ”分隔时表示：行向量

线性回归

#线性模型：通过属性的线性组合进行预测的函数

属性数值化：非数值类属性——特征工程

#确定wb：衡量差别→均方差最小化（最小二乘法）3.4→参数估计（对wb求导）3.6

多元线性回归：

#类似开头(3.1)

#类似开头(3.4）

#类似开头(3.5)

另（3.10）等于0

#最终学得模型

#梯度：n元函数各分量偏导数存在，一阶可导
#hessian：n元函数各分量二阶偏导数存在，为对称矩阵
#极大似然估计：随机变量☞联合概率：样本的似然函数→L取得最大值，概率最大→确定概率分布