← 返回列表
一种基于跨维度交互注意力的跨模态行人重识别方法
申请人信息
- 申请人:南通理工学院
- 申请人地址:226000 江苏省南通市崇川区永兴路211号
- 发明人: 南通理工学院
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种基于跨维度交互注意力的跨模态行人重识别方法 |
| 专利类型 | 发明申请 |
| 申请号 | CN202310657771.7 |
| 申请日 | 2023/6/5 |
| 公告号 | CN117746457A |
| 公开日 | 2024/3/22 |
| IPC主分类号 | G06V40/10 |
| 权利人 | 南通理工学院 |
| 发明人 | 王进; 吕泽; 江锴威; 芦欣 |
| 地址 | 江苏省南通市崇川区永兴路211号 |
摘要文本
本发明公开了一种基于跨维度交互注意力的跨模态行人重识别方法,包括对P*K张可见光图像进行灰度化处理获得灰度图像,将获得的P*K张灰度图像和P*K张红外图像输入至特征提取网络,利用ResNet50网络和基于跨维度交互的注意力块,根据输入的图像生成富含信息的图片特征,通过group损失函数和id损失函数,训练出性能良好的网络,若达到指定的训练轮数,则结束训练,否则继续完成训练,利用跨维度交互注意力机制,发掘维度之间的信息交互,更大幅度地提升了模型的识别准确率。
专利主权项内容
1.一种基于跨维度交互注意力的跨模态行人重识别方法,其特征在于:包括以下步骤:步骤1:对P*K张可见光图像进行灰度化处理获得灰度图像,进入步骤2;步骤2:将步骤1中获得的P*K张灰度图像和P*K张红外图像输入至特征提取网络,进入步骤3;步骤3:利用ResNet50网络和基于跨维度交互的注意力块,根据步骤2中输入的图像生成富含信息的图片特征,进入步骤4;步骤4:通过group损失函数和id损失函数,训练出性能良好的网络,进入步骤5;步骤5:若达到指定的训练轮数,则进行步骤6,否则继续完成训练,返回步骤1;步骤6:结束。