← 返回列表

一种基于跨维度交互注意力的跨模态行人重识别方法

申请号: CN202310657771.7
申请人: 南通理工学院
更新日期: 2026-03-10

专利详细信息

项目 内容
专利名称 一种基于跨维度交互注意力的跨模态行人重识别方法
专利类型 发明申请
申请号 CN202310657771.7
申请日 2023/6/5
公告号 CN117746457A
公开日 2024/3/22
IPC主分类号 G06V40/10
权利人 南通理工学院
发明人 王进; 吕泽; 江锴威; 芦欣
地址 江苏省南通市崇川区永兴路211号

摘要文本

本发明公开了一种基于跨维度交互注意力的跨模态行人重识别方法,包括对P*K张可见光图像进行灰度化处理获得灰度图像,将获得的P*K张灰度图像和P*K张红外图像输入至特征提取网络,利用ResNet50网络和基于跨维度交互的注意力块,根据输入的图像生成富含信息的图片特征,通过group损失函数和id损失函数,训练出性能良好的网络,若达到指定的训练轮数,则结束训练,否则继续完成训练,利用跨维度交互注意力机制,发掘维度之间的信息交互,更大幅度地提升了模型的识别准确率。

专利主权项内容

1.一种基于跨维度交互注意力的跨模态行人重识别方法,其特征在于:包括以下步骤:步骤1:对P*K张可见光图像进行灰度化处理获得灰度图像,进入步骤2;步骤2:将步骤1中获得的P*K张灰度图像和P*K张红外图像输入至特征提取网络,进入步骤3;步骤3:利用ResNet50网络和基于跨维度交互的注意力块,根据步骤2中输入的图像生成富含信息的图片特征,进入步骤4;步骤4:通过group损失函数和id损失函数,训练出性能良好的网络,进入步骤5;步骤5:若达到指定的训练轮数,则进行步骤6,否则继续完成训练,返回步骤1;步骤6:结束。