利用频域信息进行伪装目标检测
主要实现思想:利用频域信息提高伪装目标检测任务的性能。让频域信息和RGB信息相结合进行伪装目标检测,相对于已有的目标检测网络,在伪装目标的检测率更好。
FEM是频域增强模块,然后根据RGB和增强的频域流输入,进行特征对齐 。并通过高阶关系模块HOR发现特征之间的更多细微关系,从而区分伪装目标。FA模块用于功能定位。
实现介绍
FEM频率加强模块
第一步是将RGB图像DCT变换为频域信息。
第二步将频域信息分为高阶信息和低阶信息两部分,并通过多头自注意MHSA增强频段信息。由于每个块是独立的,又加入了MHSA让块之间建立连接。
由于RGB域和频率域的特征排列不一致,使用了特征对齐FA进行融合相互加强。
高阶关系模块HOR
常用的注意力机制只能捕捉到低阶关系,不足以发现细微的差异,因此,提出了高阶关系模块HOR,以充分利用频率信号中的信息。