基于Q-network强化学习的超视距空战机动决策

• 作者: 俞利新 左家亮 张强 张涛 杨任农
• 来源期刊: 空军工程大学学报（自然科学版）
• 学科: 航空航天
• 关键词: 超视距空战 机动决策 强化学习 纳什均衡
• 年，卷（期）: 2018,（6）
• 所属期刊栏目: 航空·航天
• 页码范围: 8-14
• 页数: 7页
• 分类号: V325
• 字数: 7127字
• 语种: 中文
• DOI: 10.3969/j.issn.1009-3516.2018.06.002

摘要

考虑到空空导弹对空战胜负的重要影响,针对空战态势状态特征连续、多维的情况以及传统方法缺乏对空战对抗中敌方策略的考虑,将强化学习应用到1vs1超视距空战机动决策.首先,建立了同时为对抗双方进行机动决策的强化学习框架,提出ε-纳什均衡策略来选取机动动作,并通过导弹攻击区优势函数来修正奖赏函数;其次,基于记忆库和目标网络训练Q-network,形成超视距空战机动决策的“价值网络”;最后,设计了Q-network强化学习决策模型,并将机动决策过程分为了学习阶段与实战阶段.仿真结果表明:智能体可以感知空战的态势并作出合理的超视距空战机动决策.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张强	空军工程大学空管领航学院	90	520	13.0	18.0
2	张涛	空军工程大学空管领航学院	36	57	4.0	5.0
3	俞利新	空军工程大学空管领航学院	18	48	3.0	6.0
4	杨任农	空军工程大学空管领航学院	84	283	9.0	12.0
5	左家亮	空军工程大学空管领航学院	25	114	7.0	10.0