CUHK03和Market1501计算CMC的方法

转载 2018年04月17日 08:58:00

Cumulative Matching Characteristics (CMC) curves 是目前行人重识别领域最流行的性能评估方法。考虑一个简单的 single-gallery-shot 情形,每个gallery identity只有一个instance. 对于每一次的query, 算法将根据 query 到所有gallery samples的距离从小到大排序,CMC top-k accuracy 计算如下:

                                Acc_k = 1, if top-k ranked gallery samples contain query identity

                                Acc_k = 0, otherwise

这是一个 shifted step function, 最终的CMC curve 通过对所有queries的shifted step functions取平均得到。

尽管在 single-gallery-shot 情形下,CMC 有很明确的定义,但是在 multi-gallery-shot 情形下,它的定义并不明确,因为每个gallery identity 可能存在多个instances. 例如, CUHK-03 和 Market-1501 数据集计算 CMC curves 和 CMC top-k accuracy 的方法很不同:

CUHK03: 这个数据集中,query 和 gallery 集来自不同的摄像头视角。对于每个query,  随机地从每个 gallery identity 中采样一个instance,  然后以 single-gallery-shot 的方式计算 CMC curve. 随机采样重复N次,最终输出CMC curve.

Market-1501: Query 和 gallery 集可能来自相同的摄像头视角,但是对于每个query identity, 他/她的来自同一个摄像头的 gallery samples 会被排除掉。对于每个 gallery identity,他们不会只随机采样一个instance. 这意味着在计算CMC时, query 将总是匹配 gallery 中“最简单”的正样本,而不关注其他更难识别的正样本。

由上面可以看出,在 multi-gallery-shot 情形下,CMC评估具有缺陷。因此,也使用 mAP(mean average precsion)作为评估指标。mAP可认为是PR曲线下的面积,即平均的查准率。

dataset for person re-id

CUHK02 取自5个不同的户外camera对,共1816人。5个camera对分别有971,306,107,193,239人,大小160*60. 每个人在每个摄像机下的不同时间内取两张图片。大多...
  • yuanchheneducn
  • yuanchheneducn
  • 2016-12-02 20:23:26
  • 2618

行人重识别 CUHK-03数据集描述

CUHK-03 Dataset Description参考论文:Li W, Zhao R, Xiao T, et al. DeepReID: Deep Filter Pairing Neural Ne...
  • hyk_1996
  • hyk_1996
  • 2018-02-27 13:45:53
  • 564

数据集

数据集
  • yuantangtai
  • yuantangtai
  • 2017-09-25 15:49:56
  • 868

数据集资源网站

转载数据集资源网站UCI收集的机器学习数据集ftp://pami.sjtu.edu.cnhttp://www.ics.uci.edu/~mlearn///MLRepository.htmstatlib...
  • hj_huangjun
  • hj_huangjun
  • 2009-10-24 15:10:00
  • 748

CUHK数据集和Market-1501数据集计算CMC方法的差别

Cumulative Matching Characteristics (CMC) curves 是目前行人重识别领域最流行的性能评估方法。考虑一个简单的 single-gallery-shot 情形...
  • hyk_1996
  • hyk_1996
  • 2018-03-06 13:21:45
  • 353

CMC曲线(累计匹配曲线)

CMC曲线(累计匹配曲线) CMC曲线在人脸识别,行人重识别等领域使用的非常大,但却很少有文章去详细的介绍CMC曲线,这是我在researchgate网页上某个博主主页上找到的关于CMC曲线的介绍,个...
  • AUTO1993
  • AUTO1993
  • 2017-07-03 08:53:13
  • 3214

<em>CUHK</em>人脸<em>数据</em>库

人脸<em>数据</em>库 立即下载 上传者: xwisdomhills 时间: 2014-<em>03</em>-08 综合评分: 5...为了良好体验,不建议<em>使用</em>迅雷下载<em>CUHK</em>人脸<em>数据</em>库 会员到期时间: 剩余下载个数:...
  • 2018年04月09日 00:00

模式识别分类器评价指标之CMC曲线

CMC曲线全称是Cumulative Match Characteristic (CMC) curve,也就是累积匹配曲线,同ROC曲线Receiver Operating Characteristi...
  • u011501388
  • u011501388
  • 2017-10-15 19:13:41
  • 2064

人脸识别---闭集测试评价指标CMC曲线(rank)

摘要:本文主要讲解如何得到CMC曲线。CMC曲线就是算一种top-k的击中概率,主要用闭集测试。比如有n个注册样本,现在想测试性能,测试样本依次和n个注册样本算取一个距离,然后排序,看类类样本位于前t...
  • hlx371240
  • hlx371240
  • 2016-12-06 09:13:45
  • 6989

各领域数据集

前段时间在知乎上线一个宝,就转载过来和大家分享~~~ 转载自:https://zhuanlan.zhihu.com/p/25138563 金融 美国劳工部统计局官方发布数据 房...
  • Julialove102123
  • Julialove102123
  • 2017-11-03 10:37:54
  • 795
收藏助手
不良信息举报
您举报文章:CUHK03和Market1501计算CMC的方法
举报原因:
原因补充:

(最多只允许输入30个字)