← 返回列表
人机交互的数据处理方法、服务器、存储介质和程序产品
申请人信息
- 申请人:杭州阿里云飞天信息技术有限公司
- 申请人地址:310023 浙江省杭州市余杭区五常街道文一西路969号3幢5层553室
- 发明人: 杭州阿里云飞天信息技术有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 人机交互的数据处理方法、服务器、存储介质和程序产品 |
| 专利类型 | 发明申请 |
| 申请号 | CN202410072354.0 |
| 申请日 | 2024/1/18 |
| 公告号 | CN117763128A |
| 公开日 | 2024/3/26 |
| IPC主分类号 | G06F16/332 |
| 权利人 | 杭州阿里云飞天信息技术有限公司 |
| 发明人 | 卿立之; 康杨杨; 孙常龙 |
| 地址 | 浙江省杭州市余杭区五常街道文一西路969号3幢5层553室 |
摘要文本
本申请提供一种人机交互的数据处理方法、服务器、存储介质和程序产品。本申请的方法,通过配置包含填充槽位和测评思维链的提示模板,将包括问题和待测评响应的待测评数据填充至所述提示模板的槽位中生成测评指令,将所述测评指令输入第一测评模型,使得第一测评模型进行基于所述测评思维链的逻辑推理,得到所述待测评数据的质量等级,根据所述待测评数据的质量等级,计算得到所述人机交互模型的测评结果,采用ACR的方式引入问题响应质量的多个质量等级,可缓解对于同一问答对的多次打分不一致的情况,更好地控制测评模型测评的鲁棒性;通过测评思维链指导第一测评模型的测评步骤,可提升测评准确性,扩展性强、测评效率高。
专利主权项内容
1.一种人机交互的数据处理方法,其特征在于,包括:获取待测评数据和配置的提示模板,所述待测评数据包括问题和待测评的人机交互模型生成的所述问题的响应,所述提示模板包含用于填充待测评数据的槽位和测评思维链;将待测评数据填充至所述提示模板的槽位中生成测评指令,将所述测评指令输入第一测评模型进行基于所述测评思维链的逻辑推理,得到所述待测评数据的质量等级;根据所述待测评数据的质量等级,确定所述人机交互模型的测评结果。