随记-语义分割

什么是语义分割

• 语义分割 Semantic Segmentation
  旨在对图像的每个像素进行分类，将其分配给预定义的语义类别。
  （检测图像中的物体并按属性分类）

• 实例分割 Instance Segmentation
  实例分割旨在同时完成目标检测和语义分割的任务，不仅要对图像进行语义分割，还要区分不同的目标实例，对每个对象进行独立的标记，并区分不同的实例。（更加关注重要目标）

• 全景分割 Panoptic Segmentation
  是对上述二者的综合，旨在对图像进行更细粒度的分割并提供完整的场景理解。

全卷积网络FCN

Fully Convolutional Networks for Semantic Segmentation, CVPR2015
基于深度学习的图像分割的开山之作，FCN。

摘要

主要成就：端到端、像素到像素训练方式下的卷积神经网络超过了（当时）现有语义分割最先进的技术。

主要方法：将当前分类网络改编为全卷积网络（AlexNet、VGGNet和GoogLeNet）并进行微调设计了跳跃连接将全局信息和局部信息连接起来，相互补偿。