Re-ID
han_jan
计算机视觉、Re-ID、深度学习、python
展开
-
Attention-Aware Compositional Network for Person Re-identification
创新点: 传统利用注意力机制进行行人重识别的方法中,都是利用矩形区域(RoI:region of interest)来获得注意力,包含了很多背景干扰。作者提出了一种通过人体躯干轮廓来更精准的获得注意力(PPA),然后利用注意力对全局特征更好的进行对齐,提取行人特征(AFC网络)。作者的方法:1)网络结构2)PPA对人体进行解析,确定了14个关键点(0-13...原创 2018-08-16 11:55:52 · 856 阅读 · 0 评论 -
Video Person Re-identification with Competitive Snippet-similarity Aggregation and Co-attentive Snip
一、介绍在这篇文章中,作者通过“竞争性的片段相似度聚合”和“片段的协同注意力嵌入”的方法来解决视频行人重识别问题。具体来说,作者将两个要计算相似度的长的视频序列分成若干个等长片段(各自有Np和Ng个片段),然后计算各个片段间的相似度得到NpXNg的相似度矩阵,选择前若干百分比的相似度求平均值作为两个视频序列的相似度。通过这样的方式,可以降低类内variation对视频序列相似度估计的不利影...原创 2018-10-30 15:24:30 · 1214 阅读 · 0 评论 -
Diversity Regularized Spatiotemporal Attention for Video-based Person Re-identification
一、介绍大多现存的解决视频行人重识别问题的方法是把每一帧编码成一个向量,然后对所有的帧向量进行聚合得到视频序列的特征嵌入。在实践中,行人经常被部分遮挡,这样就破坏了提取的特征。作者提出了一个新的时空注意力模型,能够自动地学习视频序列中行人特定部分(如面部、躯干、包等)。作者的模型能够很好地对抗遮挡和不对齐,有效提取所有帧中的有用信息。作者的网络学习了多个空间部分注意力模型,同时采用了一个多样性...原创 2018-11-22 21:50:39 · 2424 阅读 · 0 评论 -
Joint Detection and Identification Feature Learning for Person Search
一、介绍现有的行人重识别方法关注在匹配裁切好的行人图像,但是这和真实场景有很大不同。真实场景中行人的bbx并不存在并且目标行人需要从一个场景图片库中查找。为了弥合这个鸿沟,作者提出了一个新的网络,不同于一般的将其分解为行人检测、行人重识别两个任务,作者搭建了一个CNN来同时解决这两个问题,即行人搜索问题。此外,作者还提出了一个新的OIM损失函数(online instance matching...原创 2018-11-28 19:53:02 · 691 阅读 · 0 评论 -
ROC curve(Receiver operating characteristic)&& EER(Equal Error Rate)
ROC(Receiver operating characteristic)曲线是True positive rate – False positive rate曲线: 对于一个二分类(是/否)分类器而言,根据对测试集的分类结果得到一个(x,y)点,调整threshold阈值大小,再进行实验,就能得到新的(x,y)点。连续地调整阈值,就可以作出ROC曲线。这里的阈值是指分类器判定是或否的依...原创 2018-12-12 15:44:47 · 1116 阅读 · 1 评论 -
Large Scale Metric Learning from Equivalence Constraints (KISSME)
一:介绍现有的Mahalanobis度量学习方法很多是通过梯度下降来迭代更新M矩阵,监督程度较高(如需要所有样本标签的LMNN方法)和计算复杂(需要大量的迭代)对于样本数目日益增长的大规模数据集是很不友好的。作者从概率的观点,计算发生概率的最大似然比率来计算样本的马氏距离,无需进行昂贵的迭代运算,而且仅需要样本间yij=0或1 (即equivalence constraints)的监督信息,对...原创 2018-12-11 18:47:40 · 1542 阅读 · 1 评论 -
Siamese Neural Networks for One-shot Image Recognition
一、介绍机器学习应用中学习好的特征非常computationally expensive,而且当只有少量数据时是非常困难的。这种问题是单标注学习的原型,即每类只有一个样本,以此为依据来预测分类。在这篇文章中,作者提出了一个孪生网络来评价输入图像对的相似度。当网络训练好后,就能利用它强大的判别特性来泛化到未见过数据分别的新的类别。作者的方法在单标注分类任务上有接近state of the art...原创 2018-12-28 17:54:19 · 2302 阅读 · 0 评论 -
Jointly Attentive Spatial-Temporal Pooling Networks for Video-based Person Re-Identification
一、介绍这是一篇华中科技大学和IBM人工智能研究中心在2017年ICCV上发表的文章。在这篇文章中,作者提出了一个新奇的联合空间和时域注意力池化网络(ASTPN)来解决视频行人重识别问题。他们提出的方法能够利用到输入视频对之间的相互依赖性,来计算得到各自的特征表示。他们网络中的空间池化层能够从每个视频帧中选择重要的区域,时域注意力池化能够在整个视频序列中选择包含判别信息的帧。这两个池化层都受到...原创 2018-12-28 21:31:35 · 2006 阅读 · 1 评论 -
Spatial and Temporal Mutual Promotion for Video-based Person Re-identification
一、介绍在这篇文章发表在AAAI2019上,解决的是全监督的视频行人重识别问题。作者没有采取通过每个视频帧特征提取时域特征的方法(RNN/LSTM),而是提出了一个递归精炼单元(refining recurrent unit, RRU),能够根据历史视频帧来恢复当前帧被遮挡和噪声污染的部分(RRU输入和输出的对象是视频帧经过Inception-v3后的特征图)。然后,作者提出了一个时空线索整合...原创 2019-03-01 10:08:23 · 1501 阅读 · 0 评论 -
Attention-based Few-Shot Person Re-identification Using Meta Learning
一、介绍作者使用元学习的方法,通过构建gallery encoder和probe encoder使得gallery image图片能够根据其余gallery images提取特征,probe image能够根据gallery iamges提取特征,达到了很好的效果,few-shot的情况下就超过了全监督的方法。作者指出,当前行人重识别存在两个挑战:一是每个行人包含的样本很少。基于分类的...原创 2019-02-26 20:22:11 · 1212 阅读 · 9 评论 -
Unsupervised Person Re-identification by Deep Learning Tracklet Association
一、介绍作者提出了一个序列联系无监督深度学习框架(Tracklet Association Unsupervised Deep Learning (TAUDL))来解决无监督的行人再识别问题。作者的方法能够联合学习视野内部tracklet的联系以及视野间tracklet的联系,不需要任何额外标注。实验证明TAUDL在6个行人再识别数据集上超过了现有的无监督方法和迁移学习方法。二、作者的方法...原创 2019-03-29 17:45:27 · 2080 阅读 · 2 评论 -
Beyond Part Models: Person Retrieval with Refined Part Pooling (and A Strong Convolutional Baseline)
一、介绍提取part-level的特征进行行人重识别提供了细粒度信息,最近的研究表明对提升行人重识别准确度非常有效。其中提取part-level特征发挥作用的关键是每个部分被准确的定位。现有一些利用外部提示的方法如姿态估计等等来定位每个部分,作者提出了一种根据每部分内容上的一致性进行定位的方法。具体地说,作者目标是学习判别能力强的part-informed features来进行行人重识别...原创 2018-10-26 16:53:47 · 5136 阅读 · 0 评论 -
Harmonious Attention Network for Person Re-Identification
Harmonious Attention Network for Person Re-Identification1、介绍2、作者的方法3、实验细节4、实验结果1、介绍现有的行人重识别算法要么假设行人的bounding box对齐的很好,要么依赖有限制的、比较死板的注意力机制来校准没有对齐的图片。对行人大的姿态变化以及检测器检测错误的效果并不好。作者提出了一个HA-CNN的方法(harmoni...原创 2018-10-24 00:37:56 · 2661 阅读 · 1 评论 -
Exploit the Unknown Gradually: One-Shot Video-Based Person Re-Identification by Stepwise Learning
在这篇论文中,作者提出了通过逐渐利用未标注样本,来解决单标注样本(one-shot)情况下的视频行人重识别问题(video-based person re-ID)。这个方法简单通用,在MARS和DukeMTMC两个视频行人重识别数据集上都达到了远超 state-of-the art 的性能。1. 论文概述为什么需要关注单标注(one shot)样本问题?目前大多行人重识别方法都依赖于完...原创 2018-09-24 10:48:56 · 1688 阅读 · 0 评论 -
Stepwise Metric Promotion for Unsupervised Video Person Re-identification
在这篇文章中,作者提出了一种针对视频行人重识别的无监督学习算法。作者的方法超过了现有针对视频行人重识别无监督模型state of the art, 并且和监督模型相比同样competitive。作者的假设:1)考虑到不同的视频序列在不同的地方拍摄或者间隔时间很长,所有认为不同的视频序列一般包含不同的人2)在一个视频序列内部,所有的帧主要包含同一个人作者的方法:作者首先提出了三个...原创 2018-09-25 21:10:06 · 1149 阅读 · 0 评论 -
Person Re-identification by Local Maximal Occurrence Representation and Metric Learning(LOMO+XQDA)
2015年,学术界主流都在DL,而这篇文章却用传统方法达到了远超state of the art的结果:Retinex transform预处理:为了解决不同摄像头下光照条件变化很大:作者在特征提取前进行了预处理,使用的是multiscale Retinex algorithm(这个算法之前做图像增强的时候接触过) ,Retinex algorithm能够增强光照阴影区域的色彩信息,有...原创 2018-10-02 20:10:19 · 3930 阅读 · 2 评论 -
Dynamic Label Graph Matching for Unsupervised Video Re-Identification
本文主要解决的问题是跨摄像头标签估计,对每个摄像头建立一个图,然后在不同的图之间进行匹配。本文提出了动态图匹配(DGM)的方法,DGM迭代地更新图、标签估计。实验证明作者的方法很好,优于现有的无监督算法,而且相比监督算法同样competitive。2、作者的方法首先提取视频序列的LOMO特征,然后建图,1、Graph matching: 优化下式求yij=0或1,对应...原创 2018-09-27 01:01:41 · 951 阅读 · 0 评论 -
Efficient PSD Constrained Asymmetric Metric Learning for Person Re-identification(MLAPG)
1、介绍 作者提出了一种考虑半正定限制条件和采用非对称样本加权策略的逻辑度量学习算法(MLAPG),可以通过APG优化算法有效的迭代求解。 MLAPG收敛快速,并且阶数较低。作者将其应用到行人重识别问题,在四个数据集上取得了很好的效果。2、作者的方法1)Cross-view Logistic Metric Learning 首先是Cross-view training s...原创 2018-10-04 17:24:29 · 1120 阅读 · 0 评论 -
词袋模型
本文转载自https://www.cnblogs.com/stingsl/p/7090080.html,侵删词袋模型基本原理(Bag of words)最初的Bag of words,也叫做“词袋”,在信息检索中,Bag of words model假定对于一个文本,忽略其词序和语法、句法,将其仅仅看做是一个词集合,或者说是词的一个组合,文本中每个词的出现都是独立的,不依赖于其他词是否出现...转载 2018-09-27 14:36:04 · 499 阅读 · 0 评论 -
一些关于reid的概念
不论是基于图片还是视频的reid,都是先提取特征,然后再进行度量学习(metric learning)视频行人重识别:1)提取特征:传统方法:LOMO特征、HOG3D特征、GEI特征等等深度学习方法:IDE (ID-discriminative embedding):就是训练一个分类的网络(基于ImageNet进行fine tune),前5层卷积层,6、7是1024个神经元的全连接...原创 2018-09-27 15:02:59 · 4793 阅读 · 0 评论 -
mAP和CMC curve
mAP:(mean average precision)根据准确率-召回率曲线计算得到,反应召回率CMC curve:(Cumulative Matching Characteristic)累计匹配特性曲线,一般用Rank-1, Rank-5, Rank-20 scores代替,反应检索准确度Rank-1识别率就是表示按照某种相似度匹配规则匹配后,第一次就能判断出正确的标签的测...原创 2018-09-22 17:12:26 · 3283 阅读 · 1 评论 -
Unsupervised Person Re-identification: Clustering and Fine-tuning
1、介绍基于全监督的行人重识别问题取得了很大的进展。但是基于无监督的行人重识别问题的进展则相对缓慢。现有研究主要集中在人工提取特征然后使用无监督方法分类上,针对的数据集规模也比较小。作者提出了一个PUL(PROGRESSIVE UNSUPERVISED LEARNING)的方法,率先把深度学习框架应用到大规模数据集无监督行人重识别问题上。2、作者的方法作者将他的方法命名为PUL(PRO...原创 2018-10-07 11:26:39 · 1806 阅读 · 2 评论 -
Person Re-Identification by Deep Joint Learning of Multi-Loss Classification (JLML)
1、介绍这是一篇IJCAI2017的文章,和CVPR2018的Harmonious Attention Network for Person Re-Identification这篇的作者相同,是他们去年的工作。两篇对比来看,能看到作者方法的继承性:即CVPR2018那篇是IJCAI2017这篇加上软硬注意力以及软硬注意力交互学习的升级版。下面一起来看下IJCAI2017这篇论文。2、作者的方法...原创 2018-10-25 11:21:30 · 932 阅读 · 1 评论 -
A Bottom-up Clustering Approach to Unsupervised Person Re-identification (AAAI2019)
一、介绍这篇文章解决的是无任何标签的无监督行人再识别问题,作者提出了一种自底向上聚类方法(bottom-up clustering BUC)来联合优化CNN和无标签样本间的关系。作者的方法考虑到了行人再识别任务的两个基本的事实:不同人间的diversity和同一个人间的similarity。作者的算法最开始把每个人作为单独的一类,来最大化每类的diversity,然后逐渐的把相似的类合并为同一...原创 2019-03-26 11:37:17 · 4042 阅读 · 0 评论