半Markov决策过程的数值迭代优化

• 作者: 吴玉华 周雷 唐昊
• 来源期刊: 吉林大学学报（工学版）
• 学科: 工学
• 关键词: 计算机应用 半Markov决策过程 等价无穷小生成子 异步数值迭代
• 年，卷（期）: 2006,（1）
• 页码范围: 108-112
• 页数: 5页
• 分类号: TP202
• 字数: 4361字
• 语种: 中文
• DOI: 10.3969/j.issn.1671-5497.2006.01.022

摘要

针对半Markov决策过程在紧致行动集上的数值迭代优化,提出了折扣和平均准则下直接基于等价无穷小生成子的统一的标准数值迭代算法,并证明了其收敛性.另外,讨论了两 种性能准则下统一的异步数值迭代算法,包括Gauss-Seidel异步迭代和随机异步迭代,特别是基于样本轨道仿真的数值迭代等,并运用性能势思想对上述算法进行改进.结果表明,该算法可直接适用于连续时间Markov决策过程.最后通过一个数值例子来比较各种算法的特点.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	唐昊	合肥工业大学计算机与信息学院	45	207	8.0	10.0
2	周雷	合肥工业大学计算机与信息学院	22	92	6.0	8.0
3	吴玉华	合肥工业大学计算机与信息学院	3	15	3.0	3.0