变更者:特征交互是变更检测所需要的
ieee地球科学与遥感学报
Sheng Fang, Kaiyu Li , Graduate Student Member, IEEE, and Zhe Li
2024
摘要:变化检测是长期对地观测任务的重要工具。它将双时态图像作为输入,并预测变化发生的“位置”。与其他密集预测任务不同,变化检测的一个有意义的考虑是双时态特征之间的相互作用。基于这个动机,在本文中,我们提出了一种新的通用变化检测体系结构MetaChanger,它在特征提取器中包含了一系列可选的交互层。为了验证MetaChanger的有效性,我们提出了两个衍生模型,ChangerAD和ChangerEx,它们具有简单的交互策略:聚合-分布(AD)和特征“交换”。AD是从一些复杂的交互方法中抽象出来的,特征“交换”是通过交换双时态特征进行的完全无参数、无计算的操作。此外,为了更好地对齐双时态特征,我们提出了一种基于流的双对齐融合(FDAF)模块,该模块允许交互式对齐和特征融合。至关重要的是,我们观察到Changer系列模型在不同规模的变化检测数据集上取得了具有竞争力的性能。此外,我们提出的ChangerAD和ChangerEx可以作为未来MetaChanger设计的起始基线。代码和权重可在https://github.com/likyoo/open-cd上获得。
总体问题:是否应该探索双时相影像之间的相关性,如果应该,如何实现它?
问题一:如何有效地利用双时相图像进行变化检测?这是变化检测任务的基本问题,双时相图像提供了同一地区在不同时间点的图像数据,通过对比这两个时间点的图像,我们可以检测出该地区的变化。
问题二:如何处理双时相特征之间的交互ÿ