论文名字:基于自适应对齐的可见红外多模态行人重识别
论文链接: https://ieeexplore.ieee.org/stamp/stamp.jsp?tp=&arnumber=8913562.
文章目录
1 摘要
可见光红外行人再识别(VI-Reid)除了由于摄像光谱不同造成的跨模态差异外,仍然存在较大的行人错位问题,以及传统的人再识别一样,由于摄像机视角的不同和行人姿态的不同而引起的变化,使得可见光红外人再识别(VI-Reid)仍然存在较大的不对准问题。
本文提出了一种 多路径自适应行人对齐网络(MAPAN) 来学习区分性特征表示。 端到端的方式并且不需要额外的手动注释即可自动对齐行人。
为了减轻未对齐导致模态内的差异,联合了对齐过的可见光行人特征和原始的可见光行人特征来加强对行人的注意。
为了减轻可见光和红外交叉领域之间的差异,将两个模态的特征映射到相同的特征嵌入空间中。(上一篇多模态也是同样的处理手法)
损失:ID_LOSS+Triplet_Loss