← 返回列表
在有限资源基于磁盘内存快速组装数据的方法及系统
申请人信息
- 申请人:上海金仕达卫宁软件科技有限公司
- 申请人地址:200001 上海市黄浦区北京东路390-408号全幢2层224室
- 发明人: 上海金仕达卫宁软件科技有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 在有限资源基于磁盘内存快速组装数据的方法及系统 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311560295.3 |
| 申请日 | 2023/11/21 |
| 公告号 | CN117648341A |
| 公开日 | 2024/3/5 |
| IPC主分类号 | G06F16/2455 |
| 权利人 | 上海金仕达卫宁软件科技有限公司 |
| 发明人 | 赵蒙海; 陈海涛 |
| 地址 | 上海市黄浦区北京东路390-408号全幢2层224室 |
摘要文本
上海金仕达卫宁软件科技有限公司获取“一种透气窗帘布”专利技术,本发明提供了一种在有限资源基于磁盘内存快速组装数据的方法及系统,包括:步骤S1:sql引擎对执行的sql语句进行解析与优化生成物理执行计划;步骤S2:读取执行sql时传入的数据源,并对传入的数据源进行预处理;步骤S3:物理执行计划对预处理后的数据源进行分区,从而实现多分区并发执行。本发明通过内存加磁盘hash join同时溢写磁盘方式,让单行聚合大量数据更稳定,避免单行大小限制异常重跑,浪费时间与资源。 百度搜索专利查询网
专利主权项内容
1.一种在有限资源基于磁盘内存快速组装数据的方法,其特征在于,包括:步骤S1:sql引擎对执行的sql语句进行解析与优化生成物理执行计划;步骤S2:读取执行sql时传入的数据源,并对传入的数据源进行预处理;步骤S3:物理执行计划对预处理后的数据源进行分区,从而实现多分区并发执行。