python opencv光流跟踪_OpenCV-Python教程:44.光流

光流是物体或者摄像头的运动导致的两个连续帧之间的图像对象的视觉运动的模式。它是一个向量场，每个向量是一个位移矢量，显示了从第一帧到第二帧的点的移动。

它显示了一个球在5个连续帧里的移动。箭头显示了它的位移矢量。光流在很多领域有应用：

·从移动构建

·视频压缩

·视频稳定

光流在很多假设下有效：

1.物体像素强度在连续帧之间不变化

1.邻居像素有相似运动

考虑第一帧里的一个像素I(x,y,t)(检查新的维度，时间，)。它在dt时间后的下一帧移动了(dx, dy)。所以因为那些像素都一样，强度也不变化。我可以认为，

然后对右边做泰勒级数近似。除以dt得到下面的等式：

其中：

上面的等式被叫做光流等式，我们可以找到fx和fy，他们是图像梯度。类似的ft 是沿时间的梯度。但是(u, v)是未知的。我们无法解出这个等式。所以有一些方法来提供解决这个问题，其中一个是Lucas-Kan