图像分割论文阅读:Automatic Polyp Segmentation via Multi-scale Subtraction Network

这篇论文的主要内容是介绍了一种名为多尺度差值网络(MSNet)的自动息肉分割方法。

1,模型整体结构

d5c22e1e3ab24fb1aa1cc94a814da763.png

整体结构包括编码器,解码器,编码器和解码器之间是多尺度差值模块模块(MSM),以及一个额外的不需要训练的LossNet提供额外的监督信息。(不需要训练也能有用效果这点说实话我很疑惑)

2,MSM模块

1)SU是MSM的基础构建块,定义为两个相邻层次特征图(FA和FB)之间的元素级差值,然后通过绝对值和卷积操作来计算。SU = Conv(|FA ⊖ FB|),其中⊖表示元素级差值操作,|·|表示取绝对值,Conv(·)表示卷积层。(利用特征差值的卷积分类模型也不少,估计是作者的灵感来源)

2)为了捕获不同尺度的息肉特征,MSM通过金字塔式地连接多个SUs,这些SUs具有不同的感受野,能够计算具有不同顺序和感受野的差值特征。

3)特征融合:

跨层次差值特征和编码器输出的特征会进行融合,然后通过一个卷积层,得到互补性增强特征CE

3,LossNet

5625b3b0ba0d4e1884c4a0d6f556e3d1.png

1)LossNet在多尺度差值网络(MSNet)中扮演着重要角色,其主要作用是提供从细节到结构的全面监督,以优化分割性能。

2)LossNet使用预训练的ImageNet分类网络(如VGG-16)来提取预测结果和真实标签(ground truth)的多尺度特征。这些特征被用来计算特征层级之间的差异,从而在不同层级上提供监督信号,这有助于模型在训练过程中更好地学习到图像的细节和结构信息。

3)损失函数:除了常用的分割损失(如加权IoU损失和二元交叉熵损失)之外,LossNet通过计算预测和真实标签在不同层级的特征差异来生成额外的损失(Lf)。

4,实验结果

0e13ce13cefb499e931d3718a117e1b3.png

 

  • 6
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

蓝海渔夫

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值