融合KCCA推断强化学习的机器人智能轨迹规划

• 作者: 傅剑 娄平 曹策 滕翔
• 来源期刊: 华中科技大学学报（自然科学版）
• 学科: 工学
• 关键词: 轨迹规划 模仿强化学习(LfDRL) 核典型相关分析(KCCA) 路径积分策略提升(PI2) 伪协方差矩阵
• 年，卷（期）: 2019,（11）
• 所属期刊栏目: 控制与船舶工程
• 页码范围: 96-102
• 页数: 7页
• 分类号: TP242.6
• 语种: 中文
• DOI: 10.13245/j.hust.191117

摘要

针对当前模仿强化学习(LfDRL)框架面向新任务时并未考虑机器人各关节之间的联系,从而影响学习效果的不足,利用伪协方差矩阵的思想,基于再生核空间(RKHS)和广义瑞丽熵构建面向泛函指标的关节间摄动相关局部坐标系,进而设计出一种集成核典型相关分析(KCCA)与路径积分策略提升(PI2)的强化学习方法.利用学习经验数据基于KCCA推断出机器人各关节间面向轨迹规划任务的隐含非线性启发式信息,引导PI2搜索到最优/次优策略,使得机器人实现从示范轨迹规划任务到新轨迹规划任务的快速迁移学习,并高质量完成.选择顺应性装配机械手臂(SCARA)和优傲5(UR5)机器人的过单点、过两点迁移学习智能轨迹规划实验,结果表明:融合KCCA推断启发式信息的强化学习的平均代价下降率明显优于经典的PI2算法,其机器人智能轨迹规划在提升学习收敛速度的同时也提高了机器人完成新任务的精度.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	娄平	武汉理工大学信息学院	15	86	5.0	9.0
2	傅剑	武汉理工大学自动化学院	13	41	4.0	6.0
3	曹策	武汉理工大学自动化学院	2	0	0.0	0.0
4	滕翔	武汉理工大学自动化学院	1	0	0.0	0.0