CVPR2016 香港中文大学人脸识别研究
Sparsifying Neural Network Connections for Face Recognition
本文主要思路是先训练一个 Baseline ConvNet structures,VGG模型的。然后对这个结果进行逐层 sparse,从全连接层到卷积层。每 sparse 一层,就训练一下。最后得到一个 sparse CNN 模型。
Inspired by the Hebbian rule that “neurons that fire together wire together” [1], we drop more connections between weekly correlated neurons than those between strongly correlated neurons.
相关性小的地方,我们sparse 多点。
Baseline ConvNet structures结构:
Sparse 流程
结果对比