跨媒体检索评价指标——MAP和CMC曲线

本文介绍了跨媒体检索的评估方法,包括非可扩展和可扩展检索任务,以及数据集划分和评价指标。重点讲解了MAP(平均精度)和CMC曲线的计算原理,强调了它们在衡量检索性能中的作用。MAP关注整体性能,而CMC曲线则揭示了精度随排名变化的细节。
摘要由CSDN通过智能技术生成

一种新的主要针对图片/文字的可扩展的跨媒体检索评估方法。

 

THE EVALUATION PROTOCOL 

 

数据集划分:训练和测试集各含有一半的类别,并且类别不重合。每个集合进一步被分为两个子集:数据库子集和查询子集。使用这四个子集来衡量跨媒体检索的两个任务:

  • Non-extendable (non-XTD) retrieval: 用训练集的数据子集进行训练。然后,使用训练集的查询子集中的每个样本作为查询,在训练集的训练子集中搜索其相关的异构数据。训练/测试类别相同,衡量了传统的不可扩展的跨媒体检索方法。
  • Extendable (XTD) retrieval:  用训练集的数据子集进行训练。使用测试集的查询子集的样本作为查询,在测试集的数据库子集中搜索它们相关的异构数据。在训练和测试数据之间没有类重叠,并且在这个任务中评估新数据集的可扩展性。

 

为了平衡数据集划分对评估结果的影响,随机进行N次类别划分,最终的表现是这N次的平均。

 

评价指标:CMC curve 和 MAP.

 

MAP(平均正确率&

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值