一种基于云服务智能部署的数据处理方法及系统
申请人信息
- 申请人:深圳市伊登软件有限公司
- 申请人地址:518000 广东省深圳市福田区华富街道深南大道1006号深圳国际创新中心(福田科技广场)A栋02层西
- 发明人: 深圳市伊登软件有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种基于云服务智能部署的数据处理方法及系统 |
| 专利类型 | 发明申请 |
| 申请号 | CN202410001773.5 |
| 申请日 | 2024/1/2 |
| 公告号 | CN117492934A |
| 公开日 | 2024/2/2 |
| IPC主分类号 | G06F9/455 |
| 权利人 | 深圳市伊登软件有限公司 |
| 发明人 | 丁新云; 杨作铭; 孙军远 |
| 地址 | 广东省深圳市福田区华富街道深南大道1006号深圳国际创新中心(福田科技广场)A栋02层西 |
摘要文本
本发明属于云服务部署技术领域,公开了一种基于云服务智能部署的数据处理方法及系统,通过获取SaaS用户向云服务平台提交大数据作业的调用请求,根据调度请求统计大数据作业的计算量并虚拟计算集群,构建SaaS用户的服务优化模型、laaS提供商的资源分配模型并确定大数据作业的虚拟集群优化模型,根据虚拟集群优化模型选择对应的镜像副本,并装载到资源层构建完成的虚拟计算集群中以执行大数据作业的计算平台,在物理集群上构建虚拟大数据作业平台以执行大数据作业并输出计算结果,将计算结果输入至已训练的对抗神经网络中进行QoS预测完成云服务智能部署的数据处理,使云服务平台上大数据作业得到更好优化,也高了服务质量。
专利主权项内容
1.一种基于云服务智能部署的数据处理方法,其特征在于,包括以下步骤:获取SaaS用户向云服务平台提交大数据作业的调用请求,根据调度请求统计大数据作业的计算量,并将资源层分布在各个物理计算节点的虚拟机通过虚拟网络连接以构成执行大数据作业的虚拟计算集群,其中,云服务平台的物理服务器包括计算节点和存储节点,云服务平台包括SaaS用户、SaaS提供商和laaS提供商;根据虚拟计算集群构建SaaS用户的服务优化模型、laaS提供商的资源分配模型,基于服务优化模型和资源分配模型确定大数据作业的虚拟集群优化模型,其中,虚拟集群优化模型包括通信代理的部署数目、通信代理的部署位置、通信代理与虚拟机的映射关系;根据虚拟集群优化模型在存储节点上选择对应的镜像副本,并装载到资源层构建完成的虚拟计算集群中,以使虚拟计算集群成为执行大数据作业的计算平台;在物理集群上构建虚拟大数据作业平台以执行大数据作业并输出计算结果,将计算结果输入至已训练的对抗神经网络中进行QoS的预测以完成云服务智能部署的数据处理。