← 返回列表
一种用于智能安防的跨模态行人重识别系统及方法
摘要文本
一种用于智能安防的跨模态行人重识别系统及方法,系统包括图像预处理模块、图像获取模块、网络构建模块、网络训练模块和指标评估模块;方法包括:特征提取;构建图卷积神经进行特征融合;多级特征聚合机制;损失函数优化。本发明通过提出多样化嵌入拓展模块,通过多分支卷积生成结构,基于局部异构聚合图卷积网络的方法,利用图结构关系对提取到的局部关键点特征进行信息融合的方法,提取更多高层次特征信息;对损失函数进一步优化,提出中心引导对挖掘损失和正交损失,其以端到端的方式去除冗余,提供了更简单优化的网络结构,减弱了行人图像在可见光模态和红外模态下存在的差异,减少噪声的产生, 极大提高了行人图像在图像库中检索的效率。
申请人信息
- 申请人:中国矿业大学
- 申请人地址:221000 江苏省徐州市大学路1号
- 发明人: 中国矿业大学
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种用于智能安防的跨模态行人重识别系统及方法 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311418003.2 |
| 申请日 | 2023/10/30 |
| 公告号 | CN117475474A |
| 公开日 | 2024/1/30 |
| IPC主分类号 | G06V40/10 |
| 权利人 | 中国矿业大学 |
| 发明人 | 程德强; 姬广凯; 寇旗旗; 江鹤; 宋天舒; 王晓艺; 苏振 |
| 地址 | 江苏省徐州市大学路1号 |
专利主权项内容
1.一种用于智能安防的跨模态行人重识别系统,其特征在于,包括图像预处理模块、图像获取模块、网络构建模块、网络训练模块和指标评估模块;所述的图像预处理模块输出端与图像获取模块的输入端连接,所述图像获取模块的输出端与网络构建模块的输入端连接,所述网络构建模块的输出端与网络训练模块的输入端连接,所述网络训练模块的输出端连接指标评估模块;所述的图像预处理模块用于对使用的数据集图像进行尺寸调整、标记和随机遮挡处理;所述的图像获取模块用于对使用的数据集图像进行加载;所述的网络构建模块用于对输入的图像进行局部特征和全局特征提取,并进行多分支卷积生成和特征向量直接的拼接;所述的网络训练模块用于将通过特征提取和拼接后得到的特征向量进行样本间距离计算,并根据距离得到聚类半径,并通过损失函数的计算,进而更新网络参数;所述的指标评估模块用于网络训练完毕后,将测试数据集输入到网络中进行评估。