← 返回列表
基于虚拟现实的视点校准方法、装置及认知推断系统
申请人信息
- 申请人:浙江环玛信息科技有限公司; 杭州市第一人民医院
- 申请人地址:310000 浙江省杭州市滨江区建业路511号华业大厦15层1508室
- 发明人: 浙江环玛信息科技有限公司; 杭州市第一人民医院
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 基于虚拟现实的视点校准方法、装置及认知推断系统 |
| 专利类型 | 发明申请 |
| 申请号 | CN202410174984.9 |
| 申请日 | 2024/2/7 |
| 公告号 | CN117727087A |
| 公开日 | 2024/3/19 |
| IPC主分类号 | G06V40/18 |
| 权利人 | 浙江环玛信息科技有限公司; 杭州市第一人民医院 |
| 发明人 | 刘俊飙; 胡炜; 董芳; 吴炎强; 刁孟元; 喻晓斌; 孙乐; 徐恺; 程申篪; 戴伟英 |
| 地址 | 浙江省杭州市滨江区建业路511号华业大厦15层1508室; 浙江省杭州市浣纱路261号杭州市第一人民医院产科 |
摘要文本
本发明提供一种基于虚拟现实的视点校准方法、装置及认知推断系统，视点校准方法以被试者随观测点移动所获得的多张不同角度的被试者眼球状态图像作为一个校正组。对于每个校正组内的双眼眼球状态图像，在进行初步确分割确定眼部关键区域后进行再次分割以形成多个切片。将多个切片依次投影在嵌入向量上并结合每个切片的位置信息对分割后的眼部关键区域图像进行补偿以获得更为细致的眼部边缘，并经提取后得到精确的瞳孔边缘特征。基于每一校准组内的瞳孔边缘特征校准视点追踪模型内的视点位置。认知推断时追踪被试者在答题过程中的视点以生成视点移动时间参数，视点评估模型对视点移动时间参数进行分类以得到标准被试者认知能力的视点评估结果。
专利主权项内容
1.一种基于虚拟现实的视点校准方法，其特征在于，包括：获取虚拟现实场景下被试者眼球随观测点移动的多个眼部图像组，每一眼部图像组均包括多张不同角度的被试者双眼眼球状态图像；识别每张眼球状态图像的眼球特征和眼球移动特征以形成瞳孔边缘特征，识别眼球特征的步骤包括：分割每张眼球状态图像以确定眼部关键区域；对分割后得到的眼部关键区域图像进行再分割以得到多个切片；将每一切片映射至一维或多维的嵌入向量以形成该切片在嵌入向量上的投影；获取每一切片在眼部关键区域图像中的位置以形成位置标签；基于每一切片在嵌入向量上的投影和所形成的位置标签对分割后的眼部关键区域图像进行补偿以增强眼部关键区域图像内不同区域的差异度；提取增强后的眼部关键区域图像内的眼球特征；每一眼部图像组内多张眼球状态图像的瞳孔边缘特征形成一校准特征组，将多个校准特征组依次输入至基于瞳孔角膜反射式的视点追踪模型内以校准视点的位置。