语义分割与MMSegmentation
一、什么是语义分割
任务:将图像按照物体的类别分割成不同的区域
等价于:对每个像素进行分类
应用:无人驾驶汽车、人像分割、智能遥感、医疗影像分析
语义分割VS实例分割VS全景分割
![](https://img-blog.csdnimg.cn/img_convert/770ff1dc2ade4e14af8cdc931be0f666.png)
基本思路:按颜色分割
先验知识
![](https://img-blog.csdnimg.cn/img_convert/b5c5f074a1f34e0496429d0f5166ebf7.png)
基本思路:逐像素分类
![](https://img-blog.csdnimg.cn/img_convert/ac550e25f69342af956eb9e64542e87c.png)
复用卷积计算
![](https://img-blog.csdnimg.cn/img_convert/eda4fc594fed4b59b475caa10ffe8c0f.png)
全连接层的卷积化
![](https://img-blog.csdnimg.cn/img_convert/5d17870d8d044fc5b8809fa9285d5769.png)
全卷积网络 Fully Convolutional Network 2015
![](https://img-blog.csdnimg.cn/img_convert/5d722b86fc264b019340a3fc74a07d24.png)
![](https://img-blog.csdnimg.cn/img_convert/b12e17007d3149de87baf5c67ded4302.png)
双线性插值 Bilinear Interpolation
![](https://img-blog.csdnimg.cn/img_convert/2a9029e7b5ca4191bf21de8ddc72e7b4.png)
转置卷积 Transposed Convolution
![](https://img-blog.csdnimg.cn/img_convert/2f5afe73f2c24c4ebe9e9097823a31e1.png)
![](https://img-blog.csdnimg.cn/img_convert/4aba912a401040fa82cec742d9e25839.png)
基于多层级特征的上采样
![](https://img-blog.csdnimg.cn/img_convert/b2ea58e06a9540c98799690e88f64d17.png)
![](https://img-blog.csdnimg.cn/img_convert/2e373158de1b4d319e6f37781d5493b0.png)
UNet 2015
![](https://img-blog.csdnimg.cn/img_convert/e2202c9926f6481cbedf9ed9cb4d4bfa.png)
上下文的重要性
![](https://img-blog.csdnimg.cn/img_convert/4164f85761af4e26a9a0ce422982913b.png)
PSPNet 2016
![](https://img-blog.csdnimg.cn/img_convert/7d8c43dbdc594a729447bce2aabd8cb2.png)
空洞卷积与DeepLab系列算法
空洞卷积解决下采样算法
![](https://img-blog.csdnimg.cn/img_convert/4effb10f02174f0ab7bfe54eb522c421.png)
![](https://img-blog.csdnimg.cn/img_convert/91e5afa52a07490ba0b41120f1849dfc.png)
![](https://img-blog.csdnimg.cn/img_convert/5f4635dfdb3348d3a13d1a1f406e8b24.png)
DeepLab模型
![](https://img-blog.csdnimg.cn/img_convert/95d277faa2f9435391c135060031d273.png)
条件随机场 Conditional Random Field, CRF
![](https://img-blog.csdnimg.cn/img_convert/e604673dcce443f5bea8a8fad2521dc1.png)
![](https://img-blog.csdnimg.cn/img_convert/26e3b811db26482fb1f529e7f33ca806.png)
能量函数的意义
![](https://img-blog.csdnimg.cn/img_convert/8107c21aa21c4ce6a91a319b5a23c6ee.png)
![](https://img-blog.csdnimg.cn/img_convert/dab4a0f161364680b24d46187a0b36b5.png)
![](https://img-blog.csdnimg.cn/img_convert/539f1e84adc840e0ac77303c65351356.png)