参考链接:语义分割前言_哔哩哔哩_bilibili
常见的分割任务
- 语义分割 FCN
语义分割是对每一个像素点进行分类确定是否是所需要观测的物体
- 实例分割 Mask R-CNN
实例分割在对每一个确定观测的物体分类过后还需要确定每一个物体的类别,对其赋予不同的颜色
- 全景分割 Panoptic FPN
全景分割不仅需要对观测的物体进行分类,还需要对背景的每一个像素进行分类
常见的数据集
- PASCAL VOC
单通道数据,但是采用了调色板P模式,所以读取的图片会具有颜色,针对不同的类别赋予不一样的数值,同时边界信息也赋予一个特定的数值用于区分
- MS COCO
针对图像中的每一个目标都记录了多边形坐标(可以用于实例分割)
转置卷积 Transposed Convolution deconvolution
转置卷积不是卷积的逆运算
主要用于上采样 unsampling
转置卷积的运算步骤
- 在输入特征图元素间填充s-1行、列
- 在输入特征图四周填充k-p-1行、列
- 将卷积核参数上下左右翻转
- 做正常卷积运算(padding=0,stride=1)
公式
注意:dilation表明是否采用空洞卷积
自我理解
转置矩阵目的是为了还原原来矩阵,但是由于某些矩阵不是可逆,所以我们不能百分比的还原该矩阵,所以为了简单计算,我们采用转置矩阵代替逆矩阵来还原。