基于人体关键点引导注意力的红外-可见光行人重识别
作者:
作者单位:

1.长春理工大学,电子信息工程学院,吉林 长春 130022;2.吉林大学,电子科学与工程学院,吉林 长春 130012

作者简介:

通讯作者:

中图分类号:

TP391.4

基金项目:

吉林省自然科学基金(20210101180JC),吉林省科技厅科技发展计划项目(20180623039TC)。


Attention guided by human keypoint for infrared-visible person re-identification
Author:
Affiliation:

1.School of Electronic and Information Engineering, Changchun University of Science and Technology, Changchun 130022, China;2.College of Electronic Science and Engineering, Jilin University,Changchun 130012,China

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    行人重识别是从多个数据源中检索出指定目标的任务。红外(IR)和可见光(VIS)的图像差距较大,可见光和红外图像跨模态检索是主要挑战之一。为了能在弱光或夜间也具备相同的检索能力,需要结合红外图像的跨模态模型实现判断。 本文提出一个通过人体关键点引导注意力的新方法,通过关键点引导将全局特征拆分为局部特征,再用生成的局部掩码重新训练原模型,强化对不同局部信息的注意力。使用这个方法,模型可以更好地理解和利用图像中的关键部位,从而提升行人重识别任务的准确率。

    Abstract:

    Person re-identification is the task of retrieving a specified target from multiple data sources. The difference between infrared (IR) and visible light (VIS) images is large, and cross-modal retrieval of visible light and infrared images is one of the main challenges. In order to have the same retrieval ability even in low light or at night, the judgment needs to be achieved by combining cross-modal modeling of infrared images. In this paper, we propose a new method of guiding attention through human keypoints, where global features are split into local features by keypoint guidance, and then the original model is retrained with the generated local masks to strengthen the attention to different local information. Using this method, the model can better understand and utilize the key regions in the image, thus improving the accuracy of the person re-identification task.

    参考文献
    相似文献
    引证文献
引用本文

于鹏,田小建,齐楠,朴燕.基于人体关键点引导注意力的红外-可见光行人重识别[J].红外与毫米波学报,2024,43(6):871~878]. YU Peng, TIAN Xiao-Jian, QI Nan, PIAO Yan. Attention guided by human keypoint for infrared-visible person re-identification[J]. J. Infrared Millim. Waves,2024,43(6):871~878.]

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2024-08-09
  • 最后修改日期:2024-11-08
  • 录用日期:2024-08-28
  • 在线发布日期: 2024-11-26
  • 出版日期: 2024-12-25
文章二维码