可以查看B站视频(讲的很详细,对照下文内容进行视频观看,效果更佳):
(1)Deformable DETR | 1、Abstract 算法概述
(2)Deformable DETR | 2、backbone 、MultiHeadAttention 公式讲解
(3)Deformable DETR| 3、Deformable Attention、MSDeformAttention、流程讲解
摘要
DETR最近被提出以消除许多手工设计的组件在目标检测中的需求,同时展示了良好的性能。然而,由于Transformer注意力模块在处理图像特征图时的局限性,它存在收敛速度慢和特征空间分辨率有限的问题。为了解决这些问题,我们提出了Deformable DETR,其注意力模块仅关注参考点周围的一小部分关键采样点。Deformable DETR可以在10倍更少的训练周期内实现比DETR更好的性能(特别是在小物体上&#x