具有精英策略的深度强化学习无人机集群通信网络拓扑设计

• 作者: 冯有前 周诚 尹忠海 李明杰 梁晓龙 董方昊
• 来源期刊: 空军工程大学学报（自然科学版）
• 学科: 工学
• 关键词: 深度强化学习 精英经验池 通信网络连通度 通信网络拓扑
• 年，卷（期）: 2019,（4）
• 所属期刊栏目: 无人作战
• 页码范围: 52-58
• 页数: 7页
• 分类号: TP393
• 字数: 6433字
• 语种: 中文
• DOI: 10.3969/j.issn.1009-3516.2019.04.008

摘要

针对集群无人机背景下定向天线网络拓扑设计的NP-hard特点,基于网络高抗毁、低功耗、高稳定性等要求,以抗毁性(3-连通)、链路量、链路功耗和稳定性为奖励,提出了一种具有精英策略的深度强化学习通信网络拓扑生成算法,验证了精英经验池加速训练效果.与传统DQN相比,引入精英经验池能够有效加速模型收敛,训练时间减少3倍以上.与遗传算法相比,算法分离了训练与使用过程,当网络训练完成后,能够根据场景需要实时计算通信网络拓扑.实验阶段设计了随机给定空间位置的6节点、10节点、24节点和36节点的3-连通通信网络拓扑.实验结果表明:所提算法具有强的实时性和适用性,对于不大于36节点的网络,可在183 ms内实现网络拓扑的更新计算,达到了实际应用的实时性要求.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	梁晓龙	空军工程大学空管领航学院	70	307	8.0	14.0
2	尹忠海	空军工程大学基础部	32	157	7.0	11.0
3	冯有前	空军工程大学基础部	65	252	9.0	12.0
4	李明杰	空军工程大学基础部	4	5	1.0	2.0
5	周诚	空军工程大学基础部	13	80	5.0	8.0
6	董方昊	空军工程大学基础部	6	4	1.0	1.0