← 返回列表
相关性判断方法及基于LLM的相关性判断模型构建方法
申请人信息
- 申请人:浙江口碑网络技术有限公司; 拉扎斯网络科技(上海)有限公司
- 申请人地址:310056 浙江省杭州市滨江区长河街道网商路699号5号楼2楼203室
- 发明人: 浙江口碑网络技术有限公司; 拉扎斯网络科技(上海)有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 相关性判断方法及基于LLM的相关性判断模型构建方法 |
| 专利类型 | 发明申请 |
| 申请号 | CN202410190721.7 |
| 申请日 | 2024/2/20 |
| 公告号 | CN117743950A |
| 公开日 | 2024/3/22 |
| IPC主分类号 | G06F18/241 |
| 权利人 | 浙江口碑网络技术有限公司; 拉扎斯网络科技(上海)有限公司 |
| 发明人 | 吴晓东 |
| 地址 | 浙江省杭州市滨江区长河街道网商路699号5号楼2楼203室; 上海市普陀区真北路788号507室 |
摘要文本
本说明书一个或多个实施例提供一种相关性判断方法及基于LLM的相关性判断模型的构建方法。基于LLM的相关性判断模型的构建方法包括：获取包括搜索词、召回词以及相关性标签的数据样本；根据数据样本中的搜索词、召回词以及预设的相关性打分规则生成相关性判断提示并将其输入预训练语言模型，以使得预训练语言模型按照相关性判断提示执行以下步骤：参考相关性打分规则对搜索词和召回词进行相关性打分，生成并输出搜索词和召回词之间的相关性分数及其打分解释说明；基于各个数据样本以及与数据样本对应的相关性分数及其打分解释说明，构建训练样本；基于训练样本进行有监督训练得到相关性判断模型。实现获得预测准确率高的相关性判断模型。
专利主权项内容
1.一种基于LLM的相关性判断模型的构建方法，其特征在于，包括：获取多个数据样本，各个所述数据样本包括搜索词、召回词以及两者之间的相关性标签；针对于各个所述数据样本，根据所述数据样本中的搜索词、召回词以及预设的相关性打分规则生成相关性判断提示，并将所述相关性判断提示输入预训练语言模型，以使得所述预训练语言模型按照所述相关性判断提示执行以下步骤：参考所述相关性打分规则对所述搜索词和所述召回词进行相关性打分，生成并输出所述搜索词和所述召回词之间的相关性分数以及针对于所述相关性分数的打分解释说明；基于各个数据样本以及与所述数据样本对应的所述搜索词和所述召回词之间的相关性分数及其打分解释说明，构建训练样本；基于所述训练样本进行有监督训练得到相关性判断模型；其中，所述相关性判断模型用于基于输入的搜索词和召回词进行相关性判断，并输出相关性判断结果。