1. 简介:
TREC视频检索评估(TRECVID, TREC Video Retrieval Evaluation)的主要目标是是通过开放的、基于度量的评估,来提升针对数字视频的基于内容分析和检索技术的发展。TRECVID是一项实验性质的评估,尝试对真实世界场景或者这些场景中重要组件任务(significant component tasks)进行建模。
直到2010年,TRECVID使用的测试数据还仅仅来自少量的专业来源,包括广播新闻机构、电视栏目制片人、以及监控系统,在节目风格、内容、生产质量、语言等方便暴漏出了很大局限性。2003-2006年期间,TRECVID支持英语、阿拉伯语、汉语新闻广播节目的自动分割、索引、以及基于内容的数字视频检索。2007-2009年期间,TRECVID为参赛者提供了文化、新闻杂志、纪录片、以及教育等节目,这些内容由荷兰声音与视觉协会(Netherlands Institute for Sound and Vision)提供。参赛者的任务包括分割、搜索、特征提取、以及副本检测(copy detection)。这些系统在BBC样片(rushes)的样品视频摘要上进行了测试。监控事件检测(surveillance event detection)在英国内政部(UK Home Office)提供的机场监控视频上进行了评估。NIST和TRECVID组织创造的许多资源可以用来在独立于TRECVID的数据上进行后续研究。可以查看TRECVID网站的已有数据。
2010年,TRECVID针对新的网络视频(Internet videos),重新面临已有检索和语义索引系统问题(下文用IACC指代这些问题),这些视频在创作者、内容、风格、制作质量、原始采集设备/编码、语言等方面有很大程度的不同,且这一点在大多数网络视频(Web video)中很常见。这些视频集拥有视频提供者标注的相关关键词以及描述。这些视频在Internet Archive制定的Creative Commons licenses许可下可以在比赛中随便使用。除了Creative Commons licenses以外TRECVID要求的唯一选择标准——视频的时长(需要在6分钟以内)。除了IACC数据集,NIST开始联合语言数据联盟(Linguistic Data Consortium)创建网络多媒体测试集(Internet multimedia test collection, HAVIC),从2010年到现在,数量持续增长(多达4000个小时)。 2009年引入的机场监控视频,自引入以来一直被重复使用。
2013年新引入的是BBC提供的一组视频。来自他们长期运行的伦敦东区(EastEnders)节目的视频将被用于实例搜索任务。额外的600小时的网络压缩视频(Creative Commons Licesing for research 许可下, IACC.2)将被用于语义检索任务。
2013 TRECVID 会议中,NIST将在提供的数据上基于以下任务队系统进行评估:
- 语义索引 【IACC】(Semantic indexing)
- 交互式监控事件检测【i-LIDS】(Interactive surveillance event detection)
- 实例检索【BBC EastEnders】(Instance search)
- 多媒体事件监测【HAVIC】(Multimedia event detection)
- 多媒体事件描述【HAVIC】(Multimedia event recounting)
2. 视频数据:
大量数据集可用在TRECVID 2013中使用,详述如下。
1)一旦你决定了参与哪个任务,你就可以决定使用哪个数据集。
2)然后对于每一个需要数据集,阅读下面的信息,告诉你如何获得数据的使用权限,以及数据如何分配...
IACC.2.A-C
三个数据集(A,B,C)——总共大约7300个网络压缩视频(144G, 600个小时)
......
3. NIST规定的数据使用协议
......
4. 语义索引:
任务协调员:Georges Quenot
系统任务:
数据:
提交内容:
评估:
5. 交互式监控事件检测:
任务协调员:Jon Fiscus
在公共安全领域的许多关键的高层应用中,从大量监控视频中来高效地检测人的行为是一项基础性技术。该任务解决的用例是使用支持用户和软件之间最佳分工的系统——交互式系统,来完成对监控视频档案的回放探索。
系统任务:
给定一组监控数据文件(例如,来自机场,或者商业机构)用于预处理,测试时,选定一小组议题(对已知事件的检所要求),每一个返回所经过的时间,以及监控数据文件的一组视频分段,根据与议题的相似度排序
对一个事件的每一次搜索不能超过25分钟,是指从输入要检索的事件,直到获得认为是最终结果的这一段时间。
数据:
提交内容:
评估:
6. 实例检索:
任务协调员: Paul Over
系统任务:
数据:
提交内容:
评估:
7. 多媒体事件检测:
任务协调员: Jon Fiscus
系统任务:
数据:
提交内容:
评估:
8. 多媒体事件描述:
任务协调员:Greg Sanders
系统任务:
数据:
提交内容:
评估:
9. 日程安排
10. 2013优秀工作指导项
11. 提供给活跃参与者的信息
12. 联系人、邮件列表: