TPAMI 2024| DualCoOp++：一种快速高效的有限注释多标签识别方法

题目：DualCoOp++: Fast and Effective Adaptation to Multi-Label Recognition With Limited Annotations

DualCoOp++：一种快速高效的有限注释多标签识别方法

作者：Ping Hu；Ximeng Sun；Stan Sclaroff；Kate Saenko

---

摘要

在低标签状态下的多标签图像识别是一项极具挑战性和实际意义的任务。之前的工作主要集中在学习文本和视觉空间之间的对齐，以弥补图像标签的不足，但由于高质量多标签注释的缺乏，可能会导致精度下降。在这项研究中，我们利用了通过数百万辅助图像-文本对预训练的强大文本和视觉特征对齐能力。我们引入了一种高效的框架，称为证据引导的双上下文优化 (DualCoOp++)，作为解决部分标签和零样本多标签识别的统一方法。在 DualCoOp++ 中，我们分别为目标类别编码证据、正面和负面上下文，作为语言输入的参数化组件（即提示）。证据上下文旨在发现目标类别的所有相关视觉内容，并作为指导，从图像的空间域中聚合正面