吴恩达机器学习【第四天】多元线性规划模型

多元线性模型

这一节的内容可以看作是之前一元线性模型的提高,
其中要明白符号的意思   x j ( i ) 表 示 第 i 个 样 本 中 的 j 指 标 \ x_j^{(i)} 表示第 i 个样本中的j指标  xjiij
在这里插入图片描述

找到满足假设的参数

梯度下降法
单纯的公式推导

在这里插入图片描述
在这里插入图片描述

特征放缩

如果对于数据   x 1 和 x 2 \ x_1和x_2  x1x2,来说,如果数量级别相差很大的话,就需要对数据进行特征放缩,使得梯度下降计算更为简单。【比如下面   x 1 和 x 2 \ x_1和x_2  x1x2的数量级就相差很大。】

B.It speeds up gradient descent by making it require fewer iterations to get to a good solution.

加快了梯度下降,通过更少的迭代来达到一个好的结果

如果
可以对   x 1 和 x 2 \ x_1和x_2  x1x2进行处理
在这里插入图片描述

学习率的判断和选择

学习率太大的情况:
在这里插入图片描述
学习率太小的情况:
在这里插入图片描述

正规方程

在这里插入图片描述
需要补上   x 0 \ x_0  x0
在这里插入图片描述
记住这条公式

两种方法的比较

在这里插入图片描述
如果数据量小于一万的话,选择正规方程.【复杂度较高,低于一万可以忽略】
如果数据量大于一万的话,选择梯度下降方程.[有学习率(需要判断,麻烦)、需要多次迭代]

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值