一种多帧海藻显微图像增强识别方法及其模型搭建方法
申请人信息
- 申请人:中国海洋大学
- 申请人地址:266100 山东省青岛市崂山区松岭路238号
- 发明人: 中国海洋大学
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种多帧海藻显微图像增强识别方法及其模型搭建方法 |
| 专利类型 | 发明申请 |
| 申请号 | CN202410107225.0 |
| 申请日 | 2024/1/26 |
| 公告号 | CN117636341A |
| 公开日 | 2024/3/1 |
| IPC主分类号 | G06V20/69 |
| 权利人 | 中国海洋大学 |
| 发明人 | 付民; 周浩; 孙梦楠; 闵健; 郑冰 |
| 地址 | 山东省青岛市崂山区松岭路238号 |
摘要文本
本发明提供了一种多帧海藻显微图像增强识别方法及其模型搭建方法,属于水下图像增强识别技术领域,改进得到了一种端到端的动态权重高低频注意力DHLF former模型,DHLF former模型采取特征金字塔特征设计,添加了一个动态距离参数进行自适应学习,增加对于近距离信息的关注,能够更高效提取到海藻图像形态的关键信息;由于海藻本身的一些纹理信息及色素等对于藻类识别和鉴定也有重要的意义,添加高低频注意力机制,在减少模型参数量和计算量的同时,侧重关注海藻的高频信息,提高识别的准确率。同时,需要多帧海藻显微图像进行数据增强,利用帧间增强和时间增强,通过平均和融合技术,达到减少噪声和提高图像质量的目的。
专利主权项内容
1.一种多帧海藻显微图像增强识别模型的搭建方法,其特征在于,包括以下步骤:步骤1,获取原始图像及其分割图像,所述原始图像及其分割图像由显微镜直接连续拍摄多帧景深不同的多维度海藻显微图像并手动分割;步骤2,对步骤1中获取的原始图像进行预处理;构建训练集与测试集;步骤3,基于Transformer网络结构,设计一种端到端的动态权重高低频注意力DHLFformer模型;使用训练集对所设计的DHLF former模型进行训练;所述DHLF former模型采取特征金字塔特征设计,将多维度海藻显微图像输入到模型中,由前期结构提取的浅层次信息到后期阶段提取到的高层次信息,融合不同尺度的空间域和时间域信息进行识别;前期阶段添加了一个动态距离参数进行自适应学习,增加对于近距离信息的关注;自注意力机制采用高低频注意力机制,在减少模型参数量和计算量的同时,侧重关注海藻的高频信息;步骤4,使用测试集对训练后的动态权重高低频注意力DHLF former模型进行测试,选取识别率最佳的模型作为最终模型。