CVPR 2022 | 目标跟踪前沿论文解析

作者 | 来一块葱花饼  编辑 | 汽车人

原文链接:https://zhuanlan.zhihu.com/p/594506335

点击下方卡片,关注“自动驾驶之心”公众号

ADAS巨卷干货,即可获取

点击进入→自动驾驶之心【目标跟踪】技术交流群

后台回复【目标跟踪综述】获取单目标、多目标、基于学习方法的领域综述!

一.论文题目

  1. SiamCAR: Siamese Fully Convolutional Classification and Regression for Visual Tracking

  2. Siamese Box Adaptive Network for Visual Tracking

  3. Deformable Siamese Attention Networks for Visual Object Tracking

  4. Correlation-Guided Attention for Corner Detection Based Visual Tracking

  5. Siam R-CNN: Visual Tracking by Re-Detection

  6. Probabilistic Regression for Visual Tracking

  7. Recursive Least-Squares Estimator-Aided Online Learning for Visual Tracking

  8. ROAM: Recurrently Optimizing Tracking Model

  9. One-Shot Adversarial Attacks on Visual Tracking With Dual Attention

  10. AutoTrack: Towards High-Performance Visual Tracking for UAV With Automatic Spatio-Temporal Regularization

二.主要思想

使用了anchor-free的想法,使用fcn进行分类和回归;逐像素提取特征、进行匹配;在线学习、动态模板;使用优化器处理目标形状变化问题;使用最小二乘法来进行模板更新;通过概率来约束跟踪;使用注意力机制;跟踪的对抗攻击;通过提高角点检测的准确性来提高框的精度;利用时空信息处理。

三.具体文章

Siamese Box Adaptive Network for Visual Tracking

视觉跟踪的Siamese Box自适应网络

anchor-free的思想,使用fcn实现分类和回归

现有的跟踪器大多依赖于多尺度搜索方案或预定义的anchor来精确估计目标的尺度和宽高比。

不幸的是,它们通常需要繁琐的启发式配置。为了解决这个问题,我们提出了一个简单而有效的视觉跟踪框架(称为siamesebox自适应网络,SiamBAN),利用了全卷积网络(FCN)的表达能力。SiamBAN将视觉跟踪问题视为并行分类和回归问题,从而在统一的FCN中直接对对象进行分类并回归其边界盒。

无预先box设计避免了与候选box相关的超参数,使SiamBAN更加灵活和通用。

SiamCAR: Siamese Fully Convolutional Classification and Regression for Visual Tracking

SiamCAR:视觉跟踪的Siamese完全卷积分类和回归

anchor-free的思想,两个网络分别实现分类和回归

通过将视觉跟踪任务分解为像素类别分类和目标包围盒回归两个子问题,提出了一种新颖的全卷积Siamese网络,以逐像素方式解决端到端视觉跟踪问题

该框架SiamCAR由两个简单的子网络组成:一个用于特征提取的Siamese子网络和一个用于边界盒预测的分类回归子网络。我们的框架以ResNet-50为骨干。与基于区域提议的Siamese-RPN、SiamRPN++和SPM等最先进的跟踪器不同,所提出的框架是使用候选框和 anchor free。因此,我们能够避免棘手的超参数调整锚,减少人为干预。提出的框架简单、简洁、有效。

a18dba5da03b8f7ab39afbe432db4ea0.png

Siam R-CNN: Visual Tracking by Re-Detection

暹罗R-CNN:通过重新检测的视觉跟踪

使用两阶段检测的rcnn来进行跟踪,并且利用对第一帧模板和前一帧预测的重新检测,实际上现在更多的是使用在线更新模板,而不是一直使用第一帧的模板。

提出了暹罗R-CNN,一个暹罗重新检测架构,释放了两阶段目标检测方法的全部力量,用于视觉目标跟踪。

将此与一种新的基于轨迹的动态规划算法相结合,该算法利用对第一帧模板和前一帧预测的重新检测,来建模被跟踪对象和潜在干扰对象的完整历史。

这使得我们的方法能够做出更好的跟踪决策,以及在长时间遮挡后重新检测跟踪的对象。最后,我们提出了一种新的硬例子挖掘策略,以提高Siam R-CNN对相似外观对象的鲁棒性。Siam R-CNN在十个跟踪基准上取得了目前最好的表现,在长期跟踪方面效果特别好。

a9f183fb862abf4a380e153cf304f089.png

ROAM: Recurrently Optimizing Tracking Model

漫游:循环优化跟踪模型

本文是一个使用anchor的方法

亮点:

  1. 使用了循环优化器来解决对象的外观变化问题。

  2. 提出了一种由可调整大小的响应发生器和边界盒回归器组成的跟踪模型,在每个空间位置上只使用一个大小的锚,其对应的卷积滤波器可以通过双线性插值来适应形状的变化。

在本文中,我们设计一个跟踪模型组成的反应生成和边界框回归,第一个组件生成一个热图显示对象的出现在不同的位置,第二个组件回归相对边界盒移位到安装在滑动窗口位置的anchor。

由于在两个组件中使用了可调整大小的卷积过滤器来适应对象的形状变化,我们的跟踪模型不需要枚举不同大小的锚,从而保存模型参数。

为了有效地适应模型的外观变化,我们建议离线训练一个循环神经优化器来更新元学习设置中的跟踪模型,它可以在几个梯度步骤中收敛模型。这提高了跟踪模型更新的收敛速度。

b7c60115da550c7350894b41c0d8ff05.png

Recursive Least-Squares Estimator-Aided Online Learning for Visual Tracking

递归最小二乘估计辅助在线学习的视觉跟踪

本文讨论了在线学习中不断更新模板带来的问题。然后提出使用递归最小二乘估计算法。

将各全连通层分别用LSE连接后,进一步提出了一种改进的小批量随机梯度下降算法,用于递归保持记忆的全连通网络学习。这种特性可以自发地降低过度在线学习中由于灾难性遗忘而导致的过度拟合风险

算是一种数学方法,来优化在线学习的模板更新问题。

Probabilistic Regression for Visual Tracking

视觉跟踪的概率回归

通过概率的角度,去计算输出的概率表示。此网络预测给定输入图像的目标状态的条件概率密度,能够对任务中不准确的注释和含糊不清的标签噪声进行建模。

通过最小化kl散度和优化标签分布(y|yi)来训练,该标签分布引入了模型标注噪声和任务歧义。

本文从数学的角度,通过进一步确定目标的概率,来优化结果。

感觉改进不大啊。。也就改进了一个点左右

One-shot Adversarial Attacks on Visual Tracking with Dual Attention

双注意视觉追踪的One-shot对抗性攻击

本文是针对跟踪算法的对抗攻击方法。

提出了一种基于暹罗网络的一次性攻击跟踪器的方法,只要干扰初始帧就能使跟踪器在视频中无法跟踪

提出了一个新的优化目标函数,该函数具有双重注意机制,以产生对抗性扰动,以确保一次攻击的效率

Deformable Siamese Attention Networks for Visual Object Tracking

视觉目标跟踪的可变形siamese注意力网络

使用注意力机制改进siamese算法

一方面强调学习强语境关系,一方面强调学习上下文关系

本文可以好好学习一下。

93f939f8b9d5cfc84ef49977db59b30b.png

Correlation-Guided Attention for Corner Detection Based Visual Tracking

基于角点检测的视觉跟踪的相关引导注意

提出了一种提高角点检测的准确性、实现精确的bbox估计的跟踪算法,使用了注意力机制。

由于传统的多尺度搜索策略在许多涉及目标变化的挑战场景下无法估计紧密的bbox,因此精确的bbox估计近年来受到跟踪界的广泛关注。能够检测目标角点的跟踪器能够灵活地适应这种变化,但现有的基于角点检测的跟踪方法并没有取得足够的成功。

提出的方法的框架。首先从一个暹罗跟踪模块的结果构建RoI。然后通过两个PrPool层提取模板和RoI的特征。利用像素方向相关引导的空间注意模块通道方向相关引导的通道注意模块突出拐角区域并获得增强特征。然后对特征图进行上采样,得到两个角的热图。最后,利用两个软argmax函数计算角坐标

a7685aa6ebd3d7be54f924e092c2dfd8.png

AutoTrack: Towards High-Performance Visual Tracking for UA V withAutomatic Spatio-Temporal Regularization

AutoTrack:面向自动时空正则化的高性能无人机视觉跟踪

从数学的角度,提出自适应的正则化方法,对于时空信息进行处理

现有的基于鉴别相关滤波器(DCF)的跟踪器大多试图通过引入预定义的正则化项来提高目标对象的学习,如抑制背景学习或限制相关滤波器的变化率等。

然而,预先设定的参数需要花费大量的精力来调整它们,并且它们仍然不能适应设计师没有想到的新情况。

本文提出了一种在线自动自适应学习时空正则化项的新方法引入空间局部响应映射变化作为空间正则化,使DCF专注于学习对象值得信任的部分,全局响应映射变化决定了滤波器的更新速度。

国内首个自动驾驶学习社区

近1000人的交流社区,和20+自动驾驶技术栈学习路线,想要了解更多自动驾驶感知(分类、检测、分割、关键点、车道线、3D目标检测、多传感器融合、目标跟踪、光流估计、轨迹预测)、自动驾驶定位建图(SLAM、高精地图)、自动驾驶规划控制、领域技术方案、AI模型部署落地实战、行业动态、岗位发布,欢迎扫描下方二维码,加入自动驾驶之心知识星球,这是一个真正有干货的地方,与领域大佬交流入门、学习、工作、跳槽上的各类难题,日常分享论文+代码+视频,期待交流!

b55f998946ef8fadfe789aeb7d18e184.jpeg

自动驾驶之心】全栈技术交流群

自动驾驶之心是首个自动驾驶开发者社区,聚焦目标检测、语义分割、全景分割、实例分割、关键点检测、车道线、目标跟踪、3D目标检测、BEV感知、多传感器融合、SLAM、光流估计、深度估计、轨迹预测、高精地图、NeRF、规划控制、模型部署落地、自动驾驶仿真测试、硬件配置、AI求职交流等方向;

8dfe3c282943ca5bd67b1ce2d3cccdb7.jpeg

添加汽车人助理微信邀请入群

备注:学校/公司+方向+昵称

  • 2
    点赞
  • 16
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值