← 返回列表
引擎更新方法、处理方法、装置、设备、介质及机器人
摘要文本
本发明公开了计算机技术领域内的一种引擎更新方法、处理方法、装置、设备、介质及机器人。本发明可避免对引擎进行全参更新,在同一组件中与各模态对应的模态提取器之间相互独立,增加了模态之间的独立性,同时多个组件中与同一模态对应的能够增加对同一模态信息的处理耦合性,在一定程度上可以解决模态遗忘问题;非全参的更新方式在减少计算量和存储量的同时,并且在不降低引擎处理精度的情况下,能够对引擎进行精简,使引擎具备处理多种模态的信息的能力。
申请人信息
- 申请人:苏州元脑智能科技有限公司
- 申请人地址:215100 江苏省苏州市吴中经济开发区郭巷街道官浦路1号9幢
- 发明人: 苏州元脑智能科技有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 引擎更新方法、处理方法、装置、设备、介质及机器人 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311756801.6 |
| 申请日 | 2023/12/20 |
| 公告号 | CN117669738A |
| 公开日 | 2024/3/8 |
| IPC主分类号 | G06N5/04 |
| 权利人 | 苏州元脑智能科技有限公司 |
| 发明人 | 王鹏飞 |
| 地址 | 江苏省苏州市吴中经济开发区郭巷街道官浦路1号9幢 |
专利主权项内容
1.一种引擎更新方法,其特征在于,包括:获取目标模态的待处理数据;所述目标模态包括:文本、图像、点云和音频中的至少一种;将所述待处理数据输入对话引擎,以使所述对话引擎中的按序排列的各组件利用基础提取器提取基础特征、利用与所述目标模态对应的模态提取器提取模态特征;其中,所述对话引擎中的每一组件的输入数据包括:所述待处理数据、前一组件提取的基础特征和前一组件提取的模态特征中的至少一种;每一组件包括:基础提取器和至少一个模态提取器;利用排列在末尾的尾部组件提取的基础特征和所述尾部组件提取的模态特征的综合损失,更新每一组件中的模态提取器的参数矩阵,同时使每一组件中的基础提取器的参数矩阵保持不变;在每一组件中的模态提取器的参数矩阵更新后,调整更新后的参数矩阵的大小,以调整所述对话引擎中每一组件中的模态提取器的含参量。