基于DDPG算法的末制导律设计研究

• 作者: 刘扬 何泽众 王春宇 郭茂祖
• 来源期刊: 计算机学报
• 关键词: 末制导律 强化学习 确定性策略 归纳偏置
• 年，卷（期）: 2021,（9）
• 所属期刊栏目: 人工智能
• 页码范围: 1854-1865
• 页数: 12页
• 分类号: TP18
• 语种: 中文
• DOI: 10.11897/SP.J.1016.2021.01854

摘要

末制导律设计是拦截系统中的关键技术,常用的比例制导律及其变型在目标大机动时性能下降,且受到导航比的影响.提出基于DDPG算法的末制导律设计方法,通过对拦截问题的环境状态和动作(控制量)进行设计,实现了从仿真环境交互数据中学习回报最优的制导律;与传统方法相比,该无模型方法更具灵活性;针对强化学习方法动作集假设偏置弱带来训练效率低的问题,进一步提出将导航比作为决策优化参数,加速了训练过程并实现动态调整比例制导律中的导航比.对比实验表明,两种强化学习末制导律设计方法获得了优于比例制导律及其变型的拦截效果,展现出良好的研究前景和潜在的应用价值.