← 返回列表
一种基于时序数据库对大批量时效性数据落地及分析的方法、系统、电子设备及存储介质
摘要文本
本发明公开了一种基于时序数据库对大批量时效性数据落地及分析的方法、系统、电子设备及存储介质，采用数据采集技术对网络设备进行数据采集，在此过程中通过配置文件对数据采集中的采集时间间隔与数据类型的参数进行调整；将数据根据不同数据类型及设备地址将数据消息分发至不同的消息队列当中；根据采集时间、数据类型及设备地址对各消息队列中的数据通过分区分表进行批量存储，实现数据落地；采集时间包括年、月、日、时、分和秒；设置查询参数，包括：数据类型、归属设备和采集时间，通过对查询参数的检索分析得到业务所需的查询结果。本发明使数据的采集和使用更加灵活快速，对数据采集的效率和利用率有极大地提升。
申请人信息
- 申请人:中电信数智科技有限公司
- 申请人地址:100032 北京市海淀区复兴路33号13层东塔13层1308室
- 发明人: 中电信数智科技有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种基于时序数据库对大批量时效性数据落地及分析的方法、系统、电子设备及存储介质 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311817294.2 |
| 申请日 | 2023/12/27 |
| 公告号 | CN117667948A |
| 公开日 | 2024/3/8 |
| IPC主分类号 | G06F16/22 |
| 权利人 | 中电信数智科技有限公司 |
| 发明人 | 徐昆; 朱世宇; 赵晓彤; 郑瑞江; 魏垚; 白亚 |
| 地址 | 北京市海淀区复兴路33号13层东塔13层1308室 |
专利主权项内容
1.一种基于时序数据库对大批量时效性数据落地及分析的方法，其特征在于：采用数据采集技术对网络设备进行数据采集，在此过程中通过配置文件对数据采集中的采集时间间隔与数据类型的参数进行调整；将采集到的数据根据不同数据类型及设备地址将数据消息分发至不同的消息队列当中；根据数据的采集时间、数据类型及设备地址对各消息队列中的数据通过分区分表进行批量存储，实现数据落地；所述的采集时间包括年、月、日、时、分和秒；设置对存储的数据进行查询的查询参数，查询参数的设置对应于分区分表的计算过程，包括：数据类型、归属设备和采集时间，通过对查询参数的检索分析得到业务所需的查询结果。