← 返回列表
面向核聚变数据标准化的数据仓库架构及数据处理系统
摘要文本
本发明公开了一种面向核聚变数据标准化的数据仓库架构及数据处理系统,包括:操作型数据层,用于提取并转存核聚变业务数据,核聚变业务数据包括:核聚变数据业务操作数据、核聚变物理/业务实体数据、聚变实验数据;数据标准层,用于通过数据工具集对核聚变业务数据进行清洗、标准化;语义标准层,用于基于核聚变业务数据获取事实表、数据维表;根据核聚变数据业务建立雪花模型维护事实表与数据维表;并将聚变实验数据与事实表、数据维表建立关系,得到数据宽表;分析标准层,用于对语义标准层提供的数据宽表进行主题分类,得到每个主题下的数据宽表;数据应用层,用于将每个主题下的数据宽表面向目标维度进行聚合或数据转换。
申请人信息
- 申请人:之江实验室
- 申请人地址:311121 浙江省杭州市余杭区中泰街道科创大道之江实验室
- 发明人: 之江实验室
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 面向核聚变数据标准化的数据仓库架构及数据处理系统 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311554759.X |
| 申请日 | 2023/11/21 |
| 公告号 | CN117743476A |
| 公开日 | 2024/3/22 |
| IPC主分类号 | G06F16/28 |
| 权利人 | 之江实验室 |
| 发明人 | 周子豪; 魏一雄; 高超霖; 程达; 陈卓; 王硕; 李大松; 周娜; 唐枫; 包青平 |
| 地址 | 浙江省杭州市余杭区中泰街道科创大道之江实验室 |
专利主权项内容
1.一种面向核聚变数据标准化的数据仓库架构,其特征在于,所述数据仓库架构包括松耦合的操作型数据层、数据标准层、语义标准层、分析标准层、数据应用层、数据工具集;操作型数据层,用于从核聚变数据业务系统SQL数据库中提取并转存核聚变业务数据;所述核聚变业务数据包括:核聚变数据业务操作数据、核聚变物理/业务实体数据、聚变实验数据;数据标准层,用于通过数据工具集对核聚变业务数据进行清洗、标准化;语义标准层,用于对清洗后的核聚变数据业务操作数据进行解析,得到事实表;对清洗后的核聚变物理/业务实体数据进行解析,得到数据维表;根据核聚变数据业务建立雪花模型维护事实表与数据维表;并将聚变实验数据根据实验ID与事实表、数据维表建立关系,得到数据宽表;分析标准层,用于对语义标准层提供的数据宽表进行主题分类,得到每个主题下的数据宽表;数据应用层,用于将分析标准层提供的每个主题下的数据宽表根据外部数据应用需求面向目标维度进行聚合或数据转换。