Video Synopsis视频摘要

广义上来说，摘要可以分为2种，第一种是直接提取视频中的关键帧合成新的视频，该方法虽然也可以缩短视频的时长，但是合成后视频给人一种快进看电影的感觉，而且实际使用较少，所用的方法包括SEDIM，SEDIM-IN，CEA，TEA等方法。

       这里分享一个修改后的SEDIM程序，效果很好，http://download.csdn.net/detail/qq_14845119/9840872

       算法流程如下图所示，

第二种摘要又称视频浓缩，是对视频内容的一个简单概括，以自动或半自动的方式，先通过运动目标分析，提取运动目标，然后对各个目标的运动轨迹进行分析，将不同的目标拼接到一个共同的背景场景中，并将它们以某种方式进行组合。视频摘要在视频分析和基于内容的视频检索中扮演着重要角色。基于浓缩的摘要是实际使用最广的一种。当然包含技术也更多。

 

 

video synopsis实现了将多帧视频融合到了1帧，是一种将时间叠加到空间上的转换。将不同时间出现的人物在同一时间显示出来。

主要技术包括：

（1）背景帧建模，生成一张背景图片，包括抽取静止帧，归一化等方法

（2）运动目标检测，包括帧间差，背景建模，混合高斯，等方法

（3）目标轨迹跟踪提取，包括光流，meanshift，camshift，KCF，TLD，STC，staple，multi-cut等方法

（4）轨迹优化算法，保证摘要后同一帧中的目标物尽量不重合或者最小化的减少重合覆盖问题

（5）目标背景融合拼接，包括阿尔法融合，泊松融合等方法

 

适用范围：本地视频文件，视频中目标物少，但整体视频长，可以收到良好的浓缩效果。

 

截取其中一段本人实现效果：

 

 

 

欢迎大家指正与交流……

references:            

https://en.wikipedia.org/wiki/Video_synopsis

http://www.vision.huji.ac.il/video-synopsis/         

http://cn.mathworks.com/matlabcentral/fileexchange/46507-video-synopsis

http://www.telecom.ulg.ac.be/research/vibe/