图像分割
编码器
编码器可以视为特征提取网络,通常使用池化层来逐渐缩减输入数据的尺寸大小
解码器
解码器通过上采样/反卷积等网络层来逐步恢复目标的细节和相应的空间维度。
引入池化层可以增加感受野,并能使特征提取聚焦在重要信息中,降低背景干扰,有助于图像分类。然而池化操作使位置信息大量流失,经过编码器提取的特征不足以对像素进行精确分割,这个解码器造成了极大困扰,使得解码器中直接由上采样/反卷积生成的分割图像较为粗糙。因此,一些研究员提出在编码器和解码器之间建立快捷连接,使高分辨率特征信息能够参与后序的解码环节,进而帮助解码器更好地复原目标地细节信息。