神经网络增强学习的梯度算法研究

• 作者: 徐昕 贺汉根
• 来源期刊: 计算机学报
• 学科: 工学
• 关键词: 增强学习 神经网络 arkov决策过程 值函数逼近 梯度下降
• 年，卷（期）: 2003,（2）
• 所属期刊栏目: 研究论文与技术报告
• 页码范围: 227-233
• 页数: 7页
• 分类号: TP18
• 字数: 7129字
• 语种: 中文
• DOI: 10.3321/j.issn:0254-4164.2003.02.014

摘要

针对具有连续状态和离散行为空间的Markov决策问题，提出了一种新的采用多层前馈神经网络进行值函数逼近的梯度下降增强学习算法.该算法采用了近似贪心且连续可微的Boltzmann分布行为选择策略，通过极小化具有非平稳行为策略的Bellman残差平方和性能指标，以实现对Markov决策过程最优值函数的逼近.对算法的收敛性和近似最优策略的性能进行了理论分析.通过Mountain-Car学习控制问题的仿真研究进一步验证了算法的学习效率和泛化性能.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	徐昕	国防科学技术大学自动化研究所	14	833	7.0	14.0
2	贺汉根	国防科学技术大学自动化研究所	28	472	12.0	21.0