← 返回列表
多模态融合的学习能力评估方法、装置及电子设备
摘要文本
本发明提供一种多模态融合的学习能力评估方法、装置及电子设备,所述方法包括:采集待评估学习者在学习过程中的多模态信息,所述多模态信息包括:眼部信息、面部信息、动作信息和生理信息;基于所述多模态信息,采用识别模型识别得到所述待评估学习者在学习过程中的学习状态信息,所述学习状态信息包括以下至少一项:动作状态、情绪状态、专注状态和知识点学习轨迹;所述识别模型的训练样本是对多组学习者在各自的学习过程中产生的多模态信息基于预设采样频率进行滑窗采样得到;基于所述学习状态信息和所述待评估学习者在所述学习过程中学习的学习内容,确定所述待评估学习者的认知负荷和/或认知迁移,可提高学习能力评估的准确性。
申请人信息
- 申请人:中国科学院自动化研究所
- 申请人地址:100190 北京市海淀区中关村东路95号
- 发明人: 中国科学院自动化研究所
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 多模态融合的学习能力评估方法、装置及电子设备 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311543025.1 |
| 申请日 | 2023/11/17 |
| 公告号 | CN117636488A |
| 公开日 | 2024/3/1 |
| IPC主分类号 | G06V40/70 |
| 权利人 | 中国科学院自动化研究所 |
| 发明人 | 刘希未; 赵红霞; 边思宇; 吕宜生; 王飞跃 |
| 地址 | 北京市海淀区中关村东路95号 |
专利主权项内容
1.一种多模态融合的学习能力评估方法,其特征在于,包括:采集待评估学习者在学习过程中的多模态信息,所述多模态信息包括:眼部信息、面部信息、动作信息和生理信息;基于所述多模态信息,采用识别模型识别得到所述待评估学习者在学习过程中的学习状态信息,所述学习状态信息包括以下至少一项:动作状态、情绪状态、专注状态和知识点学习轨迹;所述识别模型的训练样本是对多组学习者在各自的学习过程中产生的多模态信息基于预设采样频率进行滑窗采样得到;基于所述学习状态信息和所述待评估学习者在所述学习过程中学习的学习内容,确定所述待评估学习者的认知负荷和/或认知迁移。