阅读论文
《视频摘要技术综述》,王娟,2014,中国图像图形学报
资源下载:https://download.csdn.net/download/weixin_41770169/10740808
论文简介
1、视频摘要简介
视频摘要分为静态视频摘要和动态视频摘要。静态视频摘要其实不算是视频,是关键帧融合而成。动态视频摘要,是对视频片段进行拼接,本身还是视频。
静态视频摘要主要分为:标题,海报和故事板。标题是视频中的文本检测与分析,构成的文本摘要。海报是关键帧组合。故事板是将结合了标题和海报。
动态视频摘要主要分为:精彩集锦和全局缩略。精彩集锦是指精彩片段,比如整场球赛中识别出进球片段。全局缩略是整个时间轴上的视频片段结合,比如电影的全局缩略,就是为了让用户快速看完,但是尽量不漏掉关键信息。
2、视频摘要的主要步骤
不管是静态视频摘要还是动态视频摘要,主要步骤都是:内容分析和摘要生成。
(1)内容分析主要分为:内部资源分析和外部资源分析。
(2)摘要生成:数据聚类、曲线规划(去冗余再聚类串联)、机器学习-模式识别
数据聚类和曲线规划可以实现视频片段的去冗余和聚类,模式识别等可以实现对视频片段的内容理解。
3、视频摘要评价标准:大小、连续性、冗余性、运动强度
QBB应用场景规划
1、通过运动目标检测出视频中的精彩片段,通过音频分析检测出视频中匹配的音频部分,两部分融合切割出好的片段;
2、通过模式识别方法对切割后的视频片段进行场景理解。
这里可以结合用户上传的视频描述,模式识别分类出的视频场景理解结果,音频分析结果综合判定,给出内容描述。
比如:宝宝在唱歌,宝宝在拍手,等等
3、可以做成一个宝宝成长记录的视频集锦:抬头、爬、走路、跑,并配合合适的音乐和文字描述,肯定很棒