← 返回列表
一种基于注意力机制的面部和情景情感识别方法
摘要文本
北京理工大学珠海学院取得“一种透气窗帘布”专利技术，本公开涉及一种基于注意力机制的面部和情景情感识别方法，通过引入注意力机制，使模型在特征提取过程中将更多的注意力用于关键信息的学习，在两个支路的情感识别中都有效提升了模型的识别率。在面部表情识别支路，通道注意力机制的引入提升了模型对关键信息的表达能力，特征选择融合方法缓解了面部表情不确定性引起的模型表现差的问题。在情景支路使用多尺度融合的方式增强模型对图像高级语义和空间信息的表达能力，通过高级特征和低级特征的互补，提升了模型的情景情感识别效果，并在最后的对比实验中证明，本申请的情感识别方法在数据集上能够得到比其他方法更好的识别效果。。来源：百度马 克 数据网
专利主权项内容
1.一种基于注意力机制的面部和情景情感识别方法，包括面部情感识别方法和情景情感设别方法；其特征在于：面部情感识别方法包括步骤：采用ResNet18网络对输入图像序列逐帧提取面部情感特征，得到面部情感特征图；将ResNet18网络提取到的面部情感特征图输入ECA模块，处理得到经过加权的面部情感特征图；经过ECA模块加权处理的面部情感特征图输入特征选择融合模块进行特征融合处理，得到面部情感识别结果P；f情景情感识别方法包括步骤：从每个视频样本中按顺序取帧图像作为输入；采用ResNeXt50网络对图像序列逐帧提取情景情感特征，得到情景情感特征图；将ResNet18网络提取到的情景情感特征图输入CA模块，处理得到经过加权的情景情感特征图；经过CA模块加权处理的情景情感特征图输入多尺度特征融合模块，得到情景情感输出的特征向量x；将上述特征向量x输入到MogrifierLSTM模块，处理得到面部情感识别结果P。ttf
专利申请信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种基于注意力机制的面部和情景情感识别方法 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311573364.4 |
| 申请日 | 2023/11/23 |
| 公告号 | CN117636426A |
| 公开日 | 2024/3/1 |
| IPC主分类号 | G06V40/16 |
| 权利人 | 北京理工大学珠海学院 |
| 发明人 | 卢桂萍; 王科俊; 张小凤; 杨涛; 朱明超 |
| 地址 | 广东省珠海市唐家湾金凤路6号 |