← 返回列表
基于异构资源度量特征的算力网络工作流调度方法及系统
摘要文本
本发明提供了一种基于异构资源度量特征的算力网络工作流调度方法及系统,其属于算力网络资源调度技术领域,所述方案在细粒度资源描述度量基础上,综合考虑任务、算力、网络以及数据等资源状况,通过调度跨域数据中心资源协作,有效提升了任务处理速度,提高资源利用率;所述方案可根据任务多样化的需求,制定需求与资源高度契合的调度策略,可以更加准确地匹配任务与资源,选择最适合的数据中心来执行任务;所述方案中,工作流中的子任务通过合理分配资源,缩短了任务的执行过程,提高了工作流执行效率;同时,所述方案针对多个数据中心负载情况,避免部分数据中心过载而导致任务延迟或一些数据中心空闲造成资源浪费的情况。
申请人信息
- 申请人:山东省计算中心(国家超级计算济南中心); 齐鲁工业大学(山东省科学院)
- 申请人地址:250000 山东省济南市历下区科院路19号
- 发明人: 山东省计算中心(国家超级计算济南中心); 齐鲁工业大学(山东省科学院)
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 基于异构资源度量特征的算力网络工作流调度方法及系统 |
| 专利类型 | 发明申请 |
| 申请号 | CN202410043836.3 |
| 申请日 | 2024/1/12 |
| 公告号 | CN117596246A |
| 公开日 | 2024/2/23 |
| IPC主分类号 | H04L67/101 |
| 权利人 | 山东省计算中心(国家超级计算济南中心); 齐鲁工业大学(山东省科学院) |
| 发明人 | 陈静; 耿玉栋; 王英龙; 葛菁; 郭莹; 李娜; 李文; 张传福 |
| 地址 | 山东省济南市历下区科院路19号; 山东省济南市西部新城大学科技园 |
专利主权项内容
1.一种基于异构资源度量特征的算力网络工作流调度方法,其特征在于,包括:响应于用户的工作流任务请求,获取当前工作流的任务资源需求以及当前用户的资源配额;当资源配额满足当前工作流的任务资源需求时,按照任务执行顺序执行工作流中的子任务;其中,在子任务执行前,预先执行如下过程:基于算网服务平台已接入的数据中心及其对应的算力度量标准信息,从算网服务平台中选择所有符合当前子任务资源需求的计算集群和存储集群组合,以及计算集群和存储集群组合所对应的数据中心标识;获取各个组合所对应的数据中心间的网络状况参数,计算综合网络性能参数;基于所述综合网络性能参数,结合预先构建的考虑位置因素以及负载均衡因素的多目标函数,通过优化求解,获得用于当前子任务执行的计算集群和存储集群组合。