← 返回列表
一种基于多模态信息的航运数据抽取方法及系统
摘要文本
本发明公开一种基于多模态信息的航运数据抽取方法及系统，该方法包括：获取航运数据的样本，所述样本包括：航运结构化数据、航运图像数据和航运视频数据，对所述航运结构化数据、所述航运图像数据和所述航运视频数据分别进行预处理，生成预处理后的航运结构化数据、预处理后的航运图像数据和预处理后的航运视频数据；分别提取预处理后的航运结构化数据的航运结构化数据特征、预处理后的航运图像数据的航运图像特征和预处理后的航运视频数据的航运视频数据特征，设置多模态关联性模型，计算所述航运结构化数据特征、所述航运图像特征和所述航运视频数据特征之间的关联性度量，根据所述关联性度量，将所述航运结构化数据特征、所述航运图像特征和所述航运视频数据特征进行特征融合，对融合后的特征进行特征抽取。
申请人信息
- 申请人:长江水上交通监测与应急处置中心
- 申请人地址:430000 湖北省武汉市江岸区一元街沿江大道134号
- 发明人: 长江水上交通监测与应急处置中心
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种基于多模态信息的航运数据抽取方法及系统 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311079498.0 |
| 申请日 | 2023/8/24 |
| 公告号 | CN117351257A |
| 公开日 | 2024/1/5 |
| IPC主分类号 | G06V10/764 |
| 权利人 | 长江水上交通监测与应急处置中心 |
| 发明人 | 杜经农; 熊劲磊; 邓燕; 芦伟; 张罡; 张娜; 张博 |
| 地址 | 湖北省武汉市江岸区一元街沿江大道134号 |
专利主权项内容
1.一种基于多模态信息的航运数据抽取方法，其特征在于，包括：获取航运数据的样本，所述样本包括：航运结构化数据、航运图像数据和航运视频数据，对所述航运结构化数据、所述航运图像数据和所述航运视频数据分别进行预处理，生成预处理后的航运结构化数据、预处理后的航运图像数据和预处理后的航运视频数据；分别提取预处理后的航运结构化数据的航运结构化数据特征、预处理后的航运图像数据的航运图像特征和预处理后的航运视频数据的航运视频数据特征，设置多模态关联性模型，计算所述航运结构化数据特征、所述航运图像特征和所述航运视频数据特征之间的关联性度量，根据所述关联性度量，将所述航运结构化数据特征、所述航运图像特征和所述航运视频数据特征进行特征融合，对融合后的特征进行特征抽取。