基于Sarsa(λ)强化学习的空间机械臂路径规划研究

• 作者: 卢山 徐帷
• 来源期刊: 宇航学报
• 学科: 工学
• 关键词: 强化学习 Sarsa方法 空间机械臂 路径规划
• 年，卷（期）: 2019,（4）
• 所属期刊栏目: 制导、导航、控制与电子
• 页码范围: 435-443
• 页数: 9页
• 分类号: V448.2|TP181
• 字数: 6508字
• 语种: 中文
• DOI: 10.3873/j.issn.1000-1328.2019.04.008

摘要

针对目标特性未知的在轨操作环境,研究了典型空间操作机械臂的路径规划策略.采用Sarsa(λ)强化学习方法实现目标跟踪及避障的自主路径规划与智能决策,该方法将机械臂系统的每节臂视为一个决策智能体,通过感知由目标偏差和障碍距离程度组成的二维状态,设计符合人工经验的拟合奖赏函数,进行各臂转动动作的强化训练,最终形成各智能体的状态-动作值函数表,即可作为机械臂在线路径规划的决策依据.将本方法应用于多自由度空间机械臂路径规划任务,仿真结果表明新算法能在有限训练次数内实现对移动目标的稳定跟踪与避障,同时各智能体通过学习所得的状态-动作值函数表,具备较强的后期在线自主调整能力,从而验证了算法较强的鲁棒性和智能性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	卢山		33	74	6.0	6.0
5	徐帷		3	17	3.0	3.0