![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
深度学习
Nick-Hwong
机器学习 深度学习 图像处理
展开
-
LSTM总结
LSTM 参考博客:https://www.jianshu.com/p/dcec3f07d3b5 idea 原始的RNN隐藏层只有一种状态,对于短期短期输入非常敏感。为了使RNN解决长距离依赖问题,LSTM增加了一个状态c来保存长期状态,称为cell state details 关键问题 - 如何控制长期状态c? 使用三个控制开关 遗忘门(forget gate):决定上一时刻的ce...原创 2019-04-09 16:15:24 · 1103 阅读 · 0 评论 -
resnet v2
相比resnet v1,主要修改了bn层与relu层的顺序 残差块公式 yl=h(xl)+F(xl,wl)xl+1=f(yl) y_l = h(x_l) + F(x_l, w_l) \\ x_{l+1} = f(y_l) yl=h(xl)+F(xl,wl)xl+1=f(yl) 分析 其中图(1)为Resnet v1的残差块图,图(5)为ResNet v2的残差块 在ResNet...原创 2019-08-01 15:05:32 · 297 阅读 · 0 评论