← 返回列表
基于容器化的任务调度方法
摘要文本
本发明公开了基于容器化的任务调度方法，包括：S1、获取Kubernetes集群和大数据组件镜像；S2、获取目标工作流中的待调度任务，根据待调度任务的数据量，获取每个待调度任务的目标资源数量和待调度任务的总目标资源数量；S3、根据目标资源数量、总目标资源数量和Kubernetes集群的节点资源，对待调度任务进行调度，获取任务调度结果；S4、根据任务调度结果，并基于大数据组件执行目标工作流中的任务，其中大数据组件从大数据组件镜像获得。本发明通过将集群中节点的可用资源量和工作流中每个任务所需的资源量进行计算，再结合大数据分析技术，可做到资源合理分配。 微信公众号专利查询网
申请人信息
- 申请人:江苏天好富兴数据技术有限公司
- 申请人地址:223200 江苏省淮安市淮安区府前路8号科技局515室
- 发明人: 江苏天好富兴数据技术有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 基于容器化的任务调度方法 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311599333.6 |
| 申请日 | 2023/11/28 |
| 公告号 | CN117435324A |
| 公开日 | 2024/1/23 |
| IPC主分类号 | G06F9/48 |
| 权利人 | 江苏天好富兴数据技术有限公司 |
| 发明人 | 孙启明; 李晓俊; 孙朝辉 |
| 地址 | 江苏省淮安市淮安区府前路8号科技局515室 |
专利主权项内容
1.基于容器化的任务调度方法，其特征在于，包括：S1、获取Kubernetes集群和大数据组件镜像；S2、获取目标工作流中的待调度任务，根据所述待调度任务的数据量，获取所述待调度任务的目标资源数量；S3、根据所述目标资源数量和所述Kubernetes集群的节点资源，对所述待调度任务进行调度，获取任务调度结果；S4、根据所述任务调度结果，并基于大数据组件执行所述目标工作流中的任务，其中所述大数据组件从所述大数据组件镜像获得。