问题来源
实习项目
Pconv网络尝试
全名为partial convolution(部分卷积)
网络背景介绍
论文地址
https://arxiv.org/pdf/1804.07723.pdf
大体介绍:
就是解决普通卷积网络在训练时会利用掩膜中的不真实替代值(一般掩膜采用0或255的值)的做法,容易出现伪影、颜色模糊、灰影等,后处理操作麻烦且代价昂贵。
所以采取数据只在有效像素上进行卷积,自动化更新mask机制。
据说该方法在不规则mask上效果颇佳。
创新点2个:
1.采用部分卷积替代所有卷积。
2.使用的损失函数较为新颖。
详细介绍:
新的卷积方式:
在当前滑动窗口上,选择有效的滑动值参与计算(选择方式是mask为判断标准),并加一个sum除法来规范化。
如果没有有效值,就直接置为0。
计算完成后,Mask更新:
对该点,如果周围没有有效像素值,置为0,