← 返回列表
分布式训练方法及电子设备
申请人信息
- 申请人:荣耀终端有限公司
- 申请人地址:518040 广东省深圳市福田区香蜜湖街道红荔西路8089号深业中城6号楼A单元3401
- 发明人: 荣耀终端有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 分布式训练方法及电子设备 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311594384.X |
| 申请日 | 2023/11/27 |
| 公告号 | CN117332881A |
| 公开日 | 2024/1/2 |
| IPC主分类号 | G06N20/20 |
| 权利人 | 荣耀终端有限公司 |
| 发明人 | 高礼 |
| 地址 | 广东省深圳市福田区香蜜湖街道东海社区红荔西路8089号深业中城6号楼A单元3401 |
摘要文本
荣耀终端有限公司取得“一种透气窗帘布”专利技术，本申请提供了一种分布式训练方法及电子设备。该方法包括：在第一集群的多个目标计算节点中，创建目标计算任务对应的计算任务进程；将第一数据集对应的第一缓存服务设置为目标计算任务的输入；根据交换网络、第一缓存服务和计算节点组，确定是否扩容；如果确定扩容，在每个目标计算节点中创建第一缓存服务的第二缓存进程，从第一缓存进程读取第一数据集并存储到第二缓存进程；目标计算节点从目标计算节点中的第二缓存进程读取第一数据集中的数据，用于目标计算节点上的计算任务进程的训练。这样，使计算任务训练过程中能够在本地读取训练所需数据，提高数据读取速度，节约网络通信带宽，从而提高训练速度。 搜索专利查询网
专利主权项内容
数据由马 克 数 据整理 1.一种分布式训练方法，其特征在于，所述方法包括：在第一集群的多个目标计算节点中，创建目标计算任务对应的计算任务进程，所有所述目标计算节点组成计算节点组；将第一数据集对应的第一缓存服务设置为所述目标计算任务的输入，所述第一集群的至少一个缓存节点中包括所述第一缓存服务的第一缓存进程，所述第一缓存进程中存储有所述第一数据集；所述缓存节点设备通过交换网络与所述第一集群之外的远程数据库相连；根据所述交换网络、所述第一缓存服务和所述计算节点组，确定是否扩容；如果确定扩容，在每个所述目标计算节点中创建所述第一缓存服务的第二缓存进程，从所述第一缓存进程读取所述第一数据集并存储到所述第二缓存进程；所述目标计算节点从所述目标计算节点中的第二缓存进程读取所述第一数据集中的数据，用于所述目标计算节点上的所述计算任务进程的训练。