三维空间场景的融合方法和系统
摘要文本
本申请实施例提供了一种三维空间场景的融合方法和系统，该方法包括以下步骤：获取人像素材集，并使用所述人像素材集对人像去模糊模型进行训练，所述人像素材集包括多个人像对，每个人像对包括一张模糊人像以及对应的高清人像；获取与三维空间场景关联的二维模糊人像和二维场景图像，将所述二维模糊人像输入到所述人像去模糊模型，得到与所述二维模糊人像对应的二维高清人像；对所述二维高清人像和所述二维场景图像进行融合，得到三维空间场景。本申请实施例通过合成与高清人像集中的每张高清人像对应的模糊人像，并作为对人像去模糊模型进行训练的人像素材集，能够对二维模糊人像进行去模糊，进而提升三维空间场景的仿真效果。
申请人信息
- 申请人:约翰休斯(宁波)视觉科技有限公司
- 申请人地址:315000 浙江省宁波市江北区宝马街8号5幢102室
- 发明人: 约翰休斯(宁波)视觉科技有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 三维空间场景的融合方法和系统 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311629700.2 |
| 申请日 | 2023/11/30 |
| 公告号 | CN117593462A |
| 公开日 | 2024/2/23 |
| IPC主分类号 | G06T17/00 |
| 权利人 | 约翰休斯(宁波)视觉科技有限公司 |
| 发明人 | 罗晋; 克里格·托米; 陈怀中; 约翰·帕特里克·休斯; 蔡蕾 |
| 地址 | 浙江省宁波市江北区宝马街8号5幢102室 |
专利主权项内容
1.一种三维空间场景的融合方法，其特征在于，包括以下步骤：获取人像素材集，并使用所述人像素材集对人像去模糊模型进行训练，所述人像素材集包括多个人像对，每个人像对包括一张模糊人像以及对应的高清人像；获取与三维空间场景关联的二维模糊人像和二维场景图像，将所述二维模糊人像输入到所述人像去模糊模型，得到与所述二维模糊人像对应的二维高清人像；对所述二维高清人像和所述二维场景图像进行融合，得到三维空间场景；其中，所述获取人像素材集，具体包括：获取模糊人像集，将所述模糊人像集中的每张模糊人像输入神经网络，得到与每张模糊人像对应的模糊核特征图及置信度热图；获取高清人像集，并针对所述高清人像集中的每张高清人像，从所述模糊人像集中筛选与所述高清人像的人脸姿态匹配的第一模糊人像；根据所述高清人像集中的每张高清人像和筛选出的第一模糊人像对应的模糊核特征图及置信度热图，分别合成与每张高清人像对应的第二模糊人像，并将所述高清人像集中的每张高清人像以及根据所述高清人像合成得到的第二模糊人像，作为人像数据对添加到人像素材集中。 来自：马 克 团 队