TPAMI 2024 | 面向现实世界视觉追踪的时间上下文研究

题目：Towards Real-World Visual Tracking With Temporal Contexts

面向现实世界视觉追踪的时间上下文研究

作者：Ziang Cao; Ziyuan Huang; Liang Pan; Shiwei Zhang; Ziwei Liu; Changhong Fu

源码链接： https://github.com/vision4robotics/TCTrack

---

摘要

视觉跟踪在过去几十年中取得了显著进步。大多数现有的最先进跟踪器：1) 仅仅针对理想条件下的性能而忽略了现实世界条件；2) 采用基于检测的跟踪范式，忽略了丰富的时间上下文；3) 仅将时间信息整合到模板中，连续帧之间的时间上下文远远没有得到充分利用。为了解决这些问题，我们提出了一个双层框架(TCTrack)，可以高效地利用时间上下文。基于此，我们提出了一个更强大的版本用于现实世界视觉跟踪，即TCTrack++。它归结为两个层面：特征和相似性映射。具体来说，对于特征提取，我们提出了一种基于注意力的时间自适应卷积，通过动态校准卷积权重来使用时间信息增强空间特征