基于频域空间域双重感知的海洋遥感图文检索方法及系统

专利主权项内容

1.基于频域空间域双重感知的海洋遥感图文检索方法，其特征在于，包括以下步骤：步骤1、提取图像文本特征：对于输入的图像数据I和文本数据T，提取图像特征V和文本特征U；步骤2、基于频域空间域双重感知建模特征，具体如下：步骤21、在频域中抽取图像显著性特征：对图像特征V分两通道分别提取显著性特征并融合生成图像频域显著性特征V；将生成的频域特征V与图像特征V进行差异计算，获得频域标识掩码b；ffvf频域标识掩码b通过以下方法获得：生成的图像频域显著性特征V与图像特征V进行差异计算，生成差异值γ，公式如下：vff其中，d为特征V和V的通道数，D为通道总数；若γ值小于指定值ε，则认为特征变化小，即未被过滤掉，也就是有效特征，此时将b中的值置为1，否则为0；fvf步骤22、在空间域中抽取图像和文本显著性特征：首先获取图像和文本的边界和/>通过评估机制判断数据的有效区域，并生成图像和文本的可信度掩码a和a，再经过二值筛选获得最终的图像和文本的空间标识掩码b和b，若掩码中的数值大于0，则判断对应的区域表示为有效特征，否则为噪声；然后将空间标识掩码b和b分别与图像特征V和文本特征U结合，最终生成图像空间域显著性特征V和文本空间域显著性特征U；vsusvsusvsusSS具体来说，首先利用采样策略以及分布最大化机制获取图像和文本的边界和/>然后在此基础上，通过图像和文本的评估机制/>和/>判断数据的有效区域，并生成可信度掩码a和a，以图像评估机制/>进行说明：vsusS＝V×U (9)；ijT其中，i和j分别是矩阵的行和列的序号，m为矩阵的总列数，S是图像特征V和文本特征U之间的相似度，×表示矩阵相乘，T为转置操作；S表示取S的所有列的最大值；a在经过二值筛选sign获得最终的空间标识掩码b，若掩码中的数值大于0，则判断对应的区域表示为有效特征，否则为噪声；ijiijvs+vsb＝sign(a) (10)；vs+vs同样地，文本的空间标识掩码b获取方式与图像的同理；us步骤23、频域和空间域显著性融合：利用标识掩码b和b将频域和空间域图像特征融合，若b＝b，则直接将图像频域显著性特征V和图像空间域显著性特征V相加，生成最终的有效图像特征V；若b≠b，则进行可信度评估，选择频域和空间域中可信度高的特征作为最终的有效图像特征V。vfvsvfvsfSOvfvsO 来源：百度搜索马克数据网