期刊文献+
共找到2篇文章
< 1 >
每页显示 20 50 100
数字孪生辅助UAV网络计算卸载优化 被引量:1
1
作者 缪家辉 郑镐 +2 位作者 赖健鑫 蒋丽 《北京邮电大学学报》 EI CAS CSCD 北大核心 2022年第6期133-139,共7页
针对动态时变无人机(UAV)网络环境下智能终端有限计算资源不能满足资源密集型任务计算需求的问题,使用数字孪生技术构建了UAV网络的孪生模型,并设计了智能终端计算卸载策略。将计算任务卸载过程建模为马尔可夫决策过程,建立联合UAV悬停... 针对动态时变无人机(UAV)网络环境下智能终端有限计算资源不能满足资源密集型任务计算需求的问题,使用数字孪生技术构建了UAV网络的孪生模型,并设计了智能终端计算卸载策略。将计算任务卸载过程建模为马尔可夫决策过程,建立联合UAV悬停点选择、计算卸载决策、UAV计算资源分配的优化模型。考虑到孪生模型与真实UAV网络的虚实映射误差,提出了基于近端策略优化的计算卸载优化算法。仿真结果表明,所提算法在适应虚实映射误差方面优于传统的深度强化学习算法。 展开更多
关键词 数字孪生 UAV网络 计算任务卸载 虚实映射误差 近端策略优化
原文传递
面向无人机数字孪生边缘网络的联邦学习资源自适应优化机制
2
作者 赖健鑫 +1 位作者 庄晓翀 蒋丽 《广东工业大学学报》 CAS 2024年第4期61-69,共9页
为了解决无人机数字孪生边缘网络联邦学习性能优化问题,本文提出一种基于深度强化学习的无人机数字孪生边缘网络资源调度策略。考虑动态时变的无人机数字孪生边缘网络环境,构建包含地面基站(Base Station,BS)、地面智能终端、空中无人... 为了解决无人机数字孪生边缘网络联邦学习性能优化问题,本文提出一种基于深度强化学习的无人机数字孪生边缘网络资源调度策略。考虑动态时变的无人机数字孪生边缘网络环境,构建包含地面基站(Base Station,BS)、地面智能终端、空中无人机以及无线传输信道的孪生网络模型,建立联合无人机飞行距离、飞行角度以及无线网络频谱资源分配的自适应资源优化模型,实现最小化联邦学习时延的目标。在无人机数字孪生边缘网络环境下,提出多智能体深度确定性策略梯度算法(Multi-Agent Deep Deterministic Policy Gradient,MA-DDPG),求解自适应资源优化模型。算法训练过程采用中心化训练、去中心化执行的方式,每个无人机智能体在评估动作价值时会考虑其他智能体的状态和动作,而在执行时只根据自身的局部观察来决定动作。上述训练过程将在数字孪生环境中执行,算法收敛后再应用于真实世界,最大限度地减少物理实体的资源开销。仿真结果表明,所提算法可显著降低联邦学习服务时延,同时保证联邦学习训练损失和准确率的优越性。 展开更多
关键词 无人机网络 数字孪生 联邦学习 多智能体深度确定性策略梯度
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部