← 返回列表
一种应用于虚拟现实的人体姿态识别与交互方法及系统
申请人信息
- 申请人:深圳市创想数维科技有限公司
- 申请人地址:518057 广东省深圳市南山区高新南九道61号卫星大厦807
- 发明人: 深圳市创想数维科技有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种应用于虚拟现实的人体姿态识别与交互方法及系统 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311702898.2 |
| 申请日 | 2023/12/12 |
| 公告号 | CN117690184A |
| 公开日 | 2024/3/12 |
| IPC主分类号 | G06V40/20 |
| 权利人 | 深圳市创想数维科技有限公司 |
| 发明人 | 吴未; 付竞达; 徐扬; 黄海力; 武士程 |
| 地址 | 广东省深圳市南山区高新南九道61号卫星大厦807 |
摘要文本
本发明公开了一种用于虚拟现实的人体姿态识别方法及系统。本发明解决了直播间虚拟拍摄中利用双目相机识别人体姿态并完成人和虚拟场景的交互。先判断人体与虚拟物体是否接触，再判断接触的部位是否怎得进行交互。根据粗分类的手势的姿态，判断手势是否循环。将所述手势轮廓图像输入时间卷积网络，既减轻了网络负担，又能够准确的判断网络的变换情况。而采用将循环的手势图像输入手势相似网络，也能更好的对手势的相似性进行判断。能够达到对虚拟物体进行交互而不对时间物体进行交互，但通过虚拟物体交互的整体姿态和手势姿态来获取对实际物体的操作信号，从而对实际物体进行交互，使得操作虚拟物体相当于操作于真实物体，而不考虑交互部件。
专利主权项内容
1.一种应用于虚拟现实的人体姿态识别与交互方法，其特征在于，包括：获取双目摄像机拍摄的多组拍摄图像；每组拍摄图像包含两张拍摄图像；所述拍摄图像为包含人体的图像；将两张拍摄图像分别进行校正，校正后进行像素点匹配，得到人体深度图；所述人体深度图表示记录双目摄像机到场景中各点的距离；根据所述人体深度图，构建虚拟场景；所述虚拟场景为虚拟的物体代替真实的物体的场景；基于所述人体深度图，进行人体轮廓识别，得到人体轮廓图；多组拍摄图像对应获取多个人体深度图和多个人体轮廓图；根据人体轮廓图和虚拟场景，判断人体是否接触可交互的物体；若人体接触可交互的物体的连续时间长度大于接触阈值，根据多个人体深度图和人体轮廓图，判断多个时间点的人体姿态变化，得到姿态类型；若人体接触可交互的物体，根据所述姿态类型，进行交互。