基于免疫聚类的自动分层强化学习方法研究

• 作者: 刘海波 沈晶 顾国昌
• 来源期刊: 哈尔滨工程大学学报
• 学科: 工学
• 关键词: 分层强化学习 自动分层 免疫聚类
• 年，卷（期）: 2007,（4）
• 页码范围: 423-428
• 页数: 6页
• 分类号: TP18
• 字数: 5372字
• 语种: 中文
• DOI: 10.3969/j.issn.1006-7043.2007.04.012

摘要

为解决分层强化学习中现有的自动分层方法对环境和状态空间特性依赖过强的问题,提出了一种基于免疫聚类的自动分层强化学习方法.该方法以Sutton提出的Option框架为基础,在学习的初始阶段,每个Option仅包含一个入口状态且执行平坦策略,经过若干个学习周期对环境进行充分探测后,应用免疫聚类方法对状态空间进行聚类,同时生成每个聚类空间下的Option,并在学习过程中完成内部策略的学习,从而实现自动分层.以二维有障碍栅格空间内路径规划为问题背景进行了仿真实验,仿真结果表明该方法不受状态空间的结构性和可分割性以及强化信号延迟的影响.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	顾国昌	哈尔滨工程大学计算机科学与技术学院	138	2134	24.0	41.0
2	刘海波	哈尔滨工程大学计算机科学与技术学院	78	683	14.0	23.0
3	沈晶	哈尔滨工程大学计算机科学与技术学院	55	417	12.0	17.0