Markov控制过程基于单个样本轨道的在线优化算法

• 作者: 唐昊 奚宏生 殷保群
• 来源期刊: 控制理论与应用
• 学科: 工学
• 关键词: Markov控制过程 Markov性能势 随机平稳策略 在线优化
• 年，卷（期）: 2002,（6）
• 所属期刊栏目: 论文与报告
• 页码范围: 865-871
• 页数: 7页
• 分类号: TP202
• 字数: 7034字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-8152.2002.06.010

摘要

在Markov性能势理论基础上,研究了Markov控制过程的性能优化算法.不同于传统的基于计算的方法,文中的算法是根据单个样本轨道的仿真来估计性能指标关于策略参数的梯度,以寻找最优(或次优)随机平稳策略.由于可根据不同实际系统的特征来选择适当的算法参数,因此它能满足不同实际工程系统在线优化的需要.最后简要分析了这些算法在一个无限长的样本轨道上以概率1的收敛性,并给出了一个三-状态受控Markov过程的数值实例.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	奚宏生	中国科学技术大学自动化系	143	1241	17.0	29.0
2	殷保群	中国科学技术大学自动化系	72	533	10.0	20.0
3	唐昊	中国科学技术大学自动化系	11	126	7.0	11.0