2020 TIFS之ReID:Visible-Infrared Person Re-Identification via Homogeneous Augmented Tri-Modal Learnin

本文提出了一种新的Visible-Infrared Person Re-Identification方法,通过同质增强三模态学习来减少RGB和IR图像之间的差距。模型利用3通道输入(RGB、灰度、IR)到共享权重的Res50网络学习共享特征,并设计了HHI损失和WTDR损失来优化模态间距离。实验表明,这种方法能有效改善跨模态特征学习,提高行人重识别性能。
摘要由CSDN通过智能技术生成

Visible-Infrared Person Re-Identification via Homogeneous Augmented Tri-Modal Learning
简述
现有的方法通常只学习了跨模态特征,而忽略了图像层次的差异。生成图像的思路目前有些方法采用GAN生成交叉模态图像,但会破坏局部结构并引入噪声。本文通过生成的RGB图像的灰度图作为辅助,以减少RGB与IR图像的large gap。
在这里插入图片描述

模型
在这里插入图片描述

本文框架方面通过3个3通道(RGB,Gray,IR)的分别输入到共享权重的Res50学习共有特征,重点在loss上:
1.HHI loss:同质和异质分类损失
在这里插入图片描述

首先是个ID loss:
在这里插入图片描述

对RGB和灰度做smooth L1 loss:

  • 1
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 7
    评论
评论 7
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值