2020-既看,又听:在弱监督下学习多模态暴力检测

Not only Look, but also Listen: Learning Multimodal Violence Detection under Weak Supervision

本文的贡献:

1.发布了一个名为XD-Violence的多模式暴力数据集,其中包含4754个未修剪的视频,涵盖了六种常见的暴力类型。 据我们所知,XD暴力是迄今为止规模最大的暴力数据集,总计217小时。 与以前的数据集不同,XD-Violence的视频是从多种场景中捕获的,例如 电影和YouTube。
2.引入了HL-Net来同时捕获远程关系和局部距离关系,这两个关系分别基于相似性优先级和邻近优先级。 此外,我们还提出了用于在线检测的HLC近似器。 基于此,我们使用分数分支动态获取额外的整体关系。
3.我们进行了广泛的实验以验证我们提出的方法的有效性,并且在两个基准(即XD-暴力(Ours)和UCF-Crime)上,我们的方法显示出明显优于现有基准的优势。 此外,实验结果还证明了与单峰相比,多峰信息的优越性。

介绍

数据集6种暴力类别:虐待、车祸、爆炸、战斗、暴动、射击。共有4754个视频,2405个暴力视频和2349个非暴力视频。3954训练集,800测试机(500暴力、300非暴力)由于暴力事件的同时发生,我们还为每个暴力视频分配了多个暴力标签(1≤#labels≤3)。

大多数方法都假设剪辑良好的视频,暴力事件几乎持续整个视频。然而,这些解

  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 8
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 8
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值