← 返回列表
数据处理方法、装置、存储介质和计算设备
摘要文本
本公开提供了一种数据处理方法、装置、存储介质和计算设备。包括：获取ETL过程中生成的实验实时数据流和指标实时数据流；将实验实时数据流中的实验数据按照键值对的存储格式存储到实验桶列表；其中，键值对中的键为实验数据中包含的用户标识，键值对的值为实验数据中包含的实验桶数据；将指标实时数据流中的指标数据按照指标标识，生成与指标标识关联的实验列表；其中，实验列表中包括具有关联的指标标识的指标数据；遍历实验列表并在实验桶列表中查询实验列表中实验对应的实验桶数据，得到由查询到的实验桶数据构成的交集实验桶列表；将交集实验桶列表中的实验桶数据，按照用户标识进行划分后进行存储。
申请人信息
- 申请人:杭州网易云音乐科技有限公司
- 申请人地址:310052 浙江省杭州市萧山区钱江世纪城奔竞大道353号杭州国际博览中心A座1201室
- 发明人: 杭州网易云音乐科技有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 数据处理方法、装置、存储介质和计算设备 |
| 专利类型 | 发明授权 |
| 申请号 | CN202311705419.2 |
| 申请日 | 2023/12/11 |
| 公告号 | CN117390106B |
| 公开日 | 2024/3/12 |
| IPC主分类号 | G06F16/25 |
| 权利人 | 杭州网易云音乐科技有限公司 |
| 发明人 | 熊搏; 周波 |
| 地址 | 浙江省杭州市萧山区钱江世纪城奔竞大道353号杭州国际博览中心A座1201室 |
专利主权项内容
1.一种数据处理方法，包括：获取ETL过程中生成的实验实时数据流和指标实时数据流；将所述实验实时数据流中的实验数据按照键值对的存储格式存储到实验桶列表；其中，所述键值对中的键为实验数据中包含的用户标识，所述键值对的值为实验数据中包含的实验桶数据；将所述指标实时数据流中的指标数据按照指标标识，生成与指标标识关联的实验列表；其中，所述实验列表中包括具有关联的指标标识的指标数据；遍历所述实验列表并在所述实验桶列表中查询所述实验列表中实验对应的实验桶数据，得到由所述查询到的实验桶数据构成的交集实验桶列表；将所述交集实验桶列表中的实验桶数据，按照用户标识进行划分后进行存储。