← 返回列表
一种海量数据的日志聚合查询方法
摘要文本
本发明公开了一种海量数据的日志聚合查询方法,包括:日志采集:从服务器采集不同类型日志数据;将日志中的数据字段采用动静结合字段进行处理,得到处理后的数据;将处理后的数据采用冷热分离模型分析后,得到冷、热数据,并将冷、热数据分流入库;先通过热数据库进行日志查询,再通过冷数据库进行日志查询。本发明由于采用了动静结合字段处理与冷热分离模型后,将日志数据分流,查询时,用户直接从热数据中查询,大大缩小查询范围,量级减少,提高了整体的查询速度。 (来自 马克数据网)
申请人信息
- 申请人:智网安云(武汉)信息技术有限公司
- 申请人地址:430000 湖北省武汉市东西湖区革新大道388-1号
- 发明人: 智网安云(武汉)信息技术有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种海量数据的日志聚合查询方法 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311397570.4 |
| 申请日 | 2023/10/24 |
| 公告号 | CN117591477A |
| 公开日 | 2024/2/23 |
| IPC主分类号 | G06F16/14 |
| 权利人 | 智网安云(武汉)信息技术有限公司 |
| 发明人 | 陈铭; 梁忠辉; 刘超 |
| 地址 | 湖北省武汉市东西湖区革新大道388-1号 |
专利主权项内容
1.一种海量数据的日志聚合查询方法,其特征在于:包括:S1、日志采集:从服务器采集不同类型日志数据;S2、日志处理:将日志中的数据字段采用动静结合字段进行处理,得到处理后的数据;S3、日志入库:将处理后的数据采用冷热分离模型分析后,得到冷、热数据,并将冷、热数据分流入库;S4、日志查询:先通过热数据库进行日志查询,再通过冷数据库进行日志查询。