基于混合强化学习的车载任务卸载调度方法及系统
摘要文本
本发明提供了一种基于混合强化学习的车载任务卸载调度方法及系统,涉及车载任务调度技术领域,方法包括:建立车载任务协同处理网络、状态变量空间和动作变量空间,基于SADDQN网络构建通信决策模型,以确定车辆目标边缘计算节点,基于DDPG网络构建任务分配决策模型,以确定车辆任务卸载率、通信传输功率和分配算力比例;以车载任务协同处理网络的总成本最小为目标,优化得到训练好的通信决策模型和任务分配决策模型,即可根据实时的状态变量空间,输出合理的通信决策和任务分配决策,进行车载任务卸载调度。本发明解决了将车载任务不合理卸载到边缘计算节点上,导致边缘计算节点处理信息量及传递信息量过大,时延过长、能耗较大的问题。
申请人信息
- 申请人:北京理工大学
- 申请人地址:100081 北京市海淀区中关村南大街5号
- 发明人: 北京理工大学
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 基于混合强化学习的车载任务卸载调度方法及系统 |
| 专利类型 | 发明申请 |
| 申请号 | CN202410205872.5 |
| 申请日 | 2024/2/26 |
| 公告号 | CN117793801A |
| 公开日 | 2024/3/29 |
| IPC主分类号 | H04W28/084 |
| 权利人 | 北京理工大学 |
| 发明人 | 邹渊; 刘佳慧; 张旭东; 吴金铭; 孙文景; 杜国栋; 张一伟; 赵凯宇; 杨鸣远; 郭建统 |
| 地址 | 北京市海淀区中关村南大街5号 |
专利主权项内容
1.一种基于混合强化学习的车载任务卸载调度方法,其特征在于,包括:根据路网信息建立车载任务协同处理网络;所述车载任务协同处理网络中包括若干个携带有车载任务的车辆和若干个边缘计算节点;根据所述车载任务协同处理网络构建状态变量空间和动作变量空间;所述状态变量空间包括车辆位置、车载任务大小、车载任务复杂度、车载任务允许时延、车辆可用算力和边缘计算节点可用算力;所述动作变量空间包括车辆目标边缘计算节点、车辆任务卸载率、通信传输功率和分配算力比例;基于SADDQN网络构建通信决策模型;所述SADDQN网络为在DDQN网络后连接自注意力网络得到的网络;所述通信决策模型用于根据当前的状态变量空间,输出通信决策;所述通信决策包括车辆目标边缘计算节点;基于DDPG网络构建任务分配决策模型;所述任务分配决策模型用于根据当前的状态变量空间和通信决策,输出任务分配决策;所述任务分配决策包括车辆任务卸载率、通信传输功率和分配算力比例;以所述车载任务协同处理网络的总成本最小为目标,训练所述通信决策模型和所述任务分配决策模型,得到训练好的通信决策模型和训练好的任务分配决策模型;根据实时的状态变量空间,通过训练好的通信决策模型输出通信决策,并根据实时的状态变量空间和通信决策,通过训练好的任务分配决策模型输出任务分配决策;根据所述通信决策和所述任务分配决策,进行车载任务卸载调度。