weixin_44028135的博客

原创 正向传播，反向传播，矩阵求导

正向传播 正向传播是指数据X传入到神经网络，经过各个隐藏层得到最终损失值的过程。 本次就以逻辑回归模型为例讲解一下正向传播以及反向传播。 逻辑回归模型一般用来解决二分类问题，y^=P(y=1∣x)\hat{y}=P(y=1 \mid x)y^​=P(y=1∣x)表示y = 1的概率，取值范围在[0,1]之间。引入线性模型： y^(i)=wTx(i)+b \hat{y}^{(i)}=w^{T} x^{(i)}+b y^​(i)=wTx(i)+b 其中www是权重系数，bbb是个常数项，www的维度为(nx,1