在线更新的信息强度引导启发式Q学习

• 作者: 吴昊霖 蔡乐才 高祥
• 来源期刊: 计算机应用研究
• 关键词: 强化学习 启发函数 信息强度 在线更新 收敛速度
• 年，卷（期）: 2018,（8）
• 所属期刊栏目: 算法研究探讨
• 页码范围: 2323-2327
• 页数: 5页
• 分类号: TP181
• 语种: 中文
• DOI: 10.3969/j.issn.1001-3695.2018.08.021

摘要

针对强化学习收敛速度慢的问题,提出可在线更新的信息强度引导的启发式Q学习算法以加快强化学习算法的收敛速度.该算法在启发式强化学习算法的基础上引入依据每次训练回报情况进行在线更新的信息强度,通过结合强弱程度不同的动作信息强度更新的启发函数和状态—动作值函数来确定策略,从而提高算法收敛速度.给出该算法并对其收敛性进行证明,同时针对不同参数设置和仿真环境进行路径规划的仿真对比实验,得到实验结果:信息强度引导的启发式Q学习算法在成功率、达到目标位置所需步数及所获回报上均优于Q学习和基本启发式Q学习算法.实验结果表明,该算法能更快地得到回报较高的策略且不会陷入局部收敛,因而该算法能够有效提高算法的收敛速度.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	蔡乐才		3	6	1.0	2.0
5	高祥		3	6	1.0	2.0
6	吴昊霖	四川理工学院自动化与信息工程学院	1	6	1.0	1.0