Semantic Segmentation: per-pixel class labels
Object Segmentation: per-object mask
Instance Segmentation: per-object mask and class labels
Panoptic Segmentation: combination of Semantic Segmentation and Instance Segmentation
要理清这几个概念,首先需要明确图像分割中的things和stuff的区别。图像中的内容可以按照是否有固定形状分成things和stuff。其中,人、车等有固定形状的物体属于things;天空、草地等没有固定形状的物体属于stuff。
语义分割是对图像中所有内容的分割,将不同的类分割出来;实例分割是对图像中things的分割,将不同的个体分割出来,并标注类别;全景分割将这两种分割结合在了一起。