← 返回列表

一种海量数据的日志聚合查询方法

申请号: CN202311397570.4
申请人: 智网安云(武汉)信息技术有限公司
申请日期: 2023/10/24

摘要文本

本发明公开了一种海量数据的日志聚合查询方法,包括:日志采集:从服务器采集不同类型日志数据;将日志中的数据字段采用动静结合字段进行处理,得到处理后的数据;将处理后的数据采用冷热分离模型分析后,得到冷、热数据,并将冷、热数据分流入库;先通过热数据库进行日志查询,再通过冷数据库进行日志查询。本发明由于采用了动静结合字段处理与冷热分离模型后,将日志数据分流,查询时,用户直接从热数据中查询,大大缩小查询范围,量级减少,提高了整体的查询速度。 (来自 马克数据网)

专利详细信息

项目 内容
专利名称 一种海量数据的日志聚合查询方法
专利类型 发明申请
申请号 CN202311397570.4
申请日 2023/10/24
公告号 CN117591477A
公开日 2024/2/23
IPC主分类号 G06F16/14
权利人 智网安云(武汉)信息技术有限公司
发明人 陈铭; 梁忠辉; 刘超
地址 湖北省武汉市东西湖区革新大道388-1号

专利主权项内容

1.一种海量数据的日志聚合查询方法,其特征在于:包括:S1、日志采集:从服务器采集不同类型日志数据;S2、日志处理:将日志中的数据字段采用动静结合字段进行处理,得到处理后的数据;S3、日志入库:将处理后的数据采用冷热分离模型分析后,得到冷、热数据,并将冷、热数据分流入库;S4、日志查询:先通过热数据库进行日志查询,再通过冷数据库进行日志查询。