bijiawokan的博客

原创 大脑学习方式中蕴含残差网络（ResNet）的思想吗

今天在看深度学习模型——transformer模型的时候，突然就被其中的残差思想部分给触动了一下。 人在学习一个新事物的时候，为了把那些特征记下来，肯定是要反复去看它的，不可能只看一遍，就闭上眼睛，在头脑中去勾勒细节了。那这种反复看的过程，是不是就是下图中的X部分？ ![残差学习：构建块](https://img-blog.csdnimg.cn/20190717145841746.png?x-os...