神经网络基础

一、神经网络基础

回归任务:最终要预测一个值。由得分算损失。
分类任务:由概率算损失。
前向传播:有了x和W,得到损失L(loss)的过程。
返向传播:
神经网络目标:去更新W,找出什么样的W是最合适的。损失很高,说明W不好。

1.得分函数 f(xi;W,b)

1)从输入到输出的映射

在这里插入图片描述

2)数学表示

在这里插入图片描述

3)计算方法

在这里插入图片描述

这里分成了三个类
W:权重系数矩阵
xi:输入(4个像素点)
b:偏置参数矩阵
在这里插入图片描述
在这里插入图片描述

4)多组权重参数构成了决策边界

在这里插入图片描述

2.损失函数 L

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

3.前向传播

在这里插入图片描述

4.Softmax分类器

在这里插入图片描述

在这里插入图片描述

梯度下降

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

2.反向传播

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值