一种日志错误数据追踪方法及系统

专利主权项内容

1.一种日志错误数据追踪方法，其特征在于，包括：创建历史日志信息库，根据预设格式对所述历史日志信息库中的日志文件进行格式化处理；并根据所述历史日志信息库构建第一子集和第二子集；所述预设格式包括日志链路编码、日志文件名、日志内容、日志预警项和日志运维编码；基于深度卷积模型建立第一日志识别模型，并根据所述第一子集、所述第二子集及目标函数训练所述第一日志识别模型，生成第二日志识别模型；所述目标函数为多融合损失函数；采集第一日志信息，对所述第一日志信息进行预处理；并根据日志预警项将所述第一日志信息与所述第一子集中的日志信息进行匹配，若匹配成功，则将所述第一日志信息输入所述第二日志识别模型进行识别，获取所述第一日志信息的错误类别；若匹配失败，则对所述第一日志信息进行重定义，生成第二日志信息，根据所述第一日志识别模型提取所述第二日志信息的特征表达，并根据所述第二日志信息的特征表达更新第一子集；根据第一日志信息的错误类别，获取日志运维编码和全链路日志信息，并根据所述日志运维编码匹配运维方案，根据匹配所得的运维方案对系统进行维护，并根据维护结果和全链路日志信息生成运维报告；所述基于深度卷积模型建立第一日志识别模型，并根据所述第一子集、所述第二子集及目标函数训练所述第一日志识别模型，生成第二日志识别模型，包括：将所述第一子集和所述第二子集映射至高维超平面，分别提取所述第一子集和第二子集的特征表达；根据核函数计算任意两个特征表达之间的内积，并根据所述目标函数约束同类特征和异类特征的内积，并迭代训练，直至所述第一日志识别模型收敛，生成第二日志识别模型；所述若匹配成功，则将所述第一日志信息输入所述第二日志识别模型进行识别，包括：根据所述第二日志识别模型提取所述第一日志信息的特征表达；根据所述特征表达和核函数，对所述第一日志信息和所述第一子集中的日志信息进行内积计算；根据内积计算结果，根据从小到大的顺序筛选出若干个错误类别，并根据统计量法和投票机制确定所述第一日志信息的错误类别；所述根据维护结果和全链路日志信息生成运维报告，包括：调取根据运维方案进行系统维护的第三日志信息，根据所述第三日志信息确定是否维护成功；若维护成功，则将第一日志信息、错误类别、维护方案和运维结果生成可视化运维报告；若维护失败，则将第一日志信息、第三日志信息、错误类别、维护方案和运维结果生成可视化运维报告，并对所述第一日志信息中的错误类别进行分级预警；在所述基于深度卷积模型建立第一日志识别模型之后，还包括对所述第一日志识别模型进行优化，具体为：获取第五日志信息，并将所述第五日志信息更新所述第二子集；根据所述第一子集、更新后的第二子集和目标函数优化所述第一日志识别模型；所述第五日志信息为与所述第一子集中的日志信息匹配失败的日志信息。