【YOLOv8改进 - 特征融合NECK】SDI：多层次特征融合模块，替换contact操作

YOLOv8目标检测创新改进与实战案例专栏

专栏目录： YOLOv8有效改进系列及项目实战目录 包含卷积，主干 注意力，检测头等创新机制 以及 各种目标检测分割项目实战案例

专栏链接: YOLOv8基础解析+创新改进+实战案例

介绍

摘要

在本文中，我们介绍了U-Net v2，一种用于医学图像分割的新型、稳健且高效的U-Net变体。它旨在增强语义信息在低级特征中的注入，同时精细化高级特征的细节。对于输入图像，我们首先通过深度神经网络编码器提取多层次特征。接下来，我们通过从高级特征中注入语义信息，并通过Hadamard积整合来自低级特征的更精细细节，来增强每一层的特征图。我们新颖的跳跃连接使所有层次的特征都具备丰富的语义特征和复杂的细节。改进后的特征随后被传递到解码器进行进一步处理和分割。我们的方法可以无缝集成到任何编码器-解码器网络中。我们在多个公开的医学图像分割数据集上评估了我们的方法，包括皮肤病变分割和息肉分割，实验结果表明，我们的新方法在保持内存和计算效率的同时，在分割准确性上优于最先进的方法。代码可在：https://github.com/yaoppeng/U-Net v2 获取。

文章链接

论文地址：论文地址

代码地址：代码地址

基本原理

SDI（Semantics and Detail Infusion）模块是U-Net v2架构中的核心组件，旨在提高医疗图像分割的效果。以下是SDI模块的详细介绍：

SDI模块的概念

SDI模块的主要目的是将高层特征中的语义信息与低层特征中的细节信息相结合，从而增强各级特征图的表示能力。这一模块通过简单高效的跳跃连接实现这一点，使得网络能够更好地捕捉图像的语义信息和细节信息。

SDI模块的结构

1. 空间和通道注意力机制

首先，SDI模块对编码器生成的每一级特征图应用空间和通道注意力机制。这一步骤使特征图能够整合局部的空间信息和全局的通道信息，公式如下：

f 1 i = ϕ c i ( ϕ s i ( f 0 i