1.What’s VideoTracking
1.1Introduction
videosurveillance:视频监控
Visual Tracking的概念:使用相机对一个或多个对象在时间和位置上进行估计的过程被称为视频跟踪。
1.2 THE DESIGNOF A VIDEO TRACKER
通过对目标的外观和它相关像素值之间关系建模,视频追踪器可以在时间上估计目标的位置。
1.2.1 Challenges
设计和操作一个追踪器时需要考虑的主要挑战是和目标及其场景中其他对象之间的相似性,以及目标自身的外观变化相关的。Cluter定义:其他对象或者北京的外观与目标的外观相似,因此可能干扰对它的观察。在这种情况下,从非目标区域提取的图像特征难以从人们期望的目标特征区分开来。这种现象称作cluter(混乱)。
除了混乱导致的追踪挑战,由于一个或多个以下因素导致的图像平面中目标外观的改变,也是使得追踪变得困难的因素:
- 姿势的改变:一个移动的目标投影到图像平面时外观会变化,例如当旋转时。
- 周围的光照:环境光的方向、强度和色彩影响目标的外观。此外,全局照明的变化通常在户外场景下也是一个挑战。
- 噪音:图像采集过程中将一定程度的噪音引入到了图像信号中,这取决于传感器的质量。
- 遮挡:当部分或全部被场景中其他对象重叠时,观察目标可能失败。遮挡主要是由于:移动目标在一个静态对象后面,如柱,墙,或桌子上,或者其他移动对象挡住了目标。
- 为了处理这些挑战,可以用不同的方法处理不同级别的遮挡:(1)影响目标区域的只有一小部分的部分遮挡可以由目标外观模型或目标检测算法本身来处理。(2)目标外观信息不足以应付完全遮挡。在这个具有挑战性的场景中跟踪连续性可以通过更高水平的推理或通过可以随着时间推移保持传播跟踪假说的多假设方法实现。典型的运动行为信息和已存在的遮挡模式可以在缺乏有效测量的情况下用来传播目标轨迹。当目标从遮挡中重新出现,多个最总假设的传播和外观模型可以为重新开始一个追踪提供必要的线索。