Changmao Cheng1∗, Yanwei Fu2∗, Yu-Gang Jiang1†,
Wei Liu3, Wenlian Lu4, Jianfeng Feng4, Xiangyang Xue1
1 School of Computer Science, Fudan University 3 Tencent AI Lab
2 School of Data Science, Fudan University 4 ISTBI, Fudan University
1. 介绍:
神经学公认人的视觉是从粗到细的,右脑粗左脑细。
对于快速闪过的图像,我们大概只能看到低频信息。定睛观察,才能看到高频信息。
我们很自然地会问,我们的网络是否具有用短路径预测粗略信息和用长路径预测精细视觉刺激的机制
接下来就是说生物神经是如何启发我们的。
我们提出一个附属门控网络,它学习预测在测试阶段是否跳过几个卷积层。
与DenseNets和ResNets中使用的快捷连接不同,我们学习了跳层机制来预测在测试阶段是否跳过一个特定层。跳层机制的灵感来自于一次性认知过程中,人脑中只有1%的神经元被使用[28]。
3. 模型
双跳网络如图所示这两个子集与相同的视觉输入共享,并且构建在几种类型的模块上,即