Markov控制过程在紧致行动集上的迭代优化算法

• 作者: 唐昊 奚宏生 殷保群
• 来源期刊: 控制与决策
• 学科: 工学
• 关键词: Markov控制过程 紧致行动集 性能势 策略迭代 数值迭代
• 年，卷（期）: 2003,（3）
• 所属期刊栏目: 论文与报告
• 页码范围: 267-271
• 页数: 5页
• 分类号: TP202
• 字数: 4617字
• 语种: 中文
• DOI: 10.3321/j.issn:1001-0920.2003.03.003

摘要

研究一类连续时间Markov控制过程(CTMCP)在紧致行动集上关于平均代价性能准则的优化算法.根据CTMCP的性能势公式和平均代价最优性方程,导出了求解最优或次最优平稳控制策略的策略迭代算法和数值迭代算法,在无需假设迭代算子是sp-压缩的条件下,给出了这两种算法的收敛性证明.最后通过分析一个受控排队网络的例子说明了这种方法的优越性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	奚宏生	中国科学技术大学自动化系	143	1241	17.0	29.0
2	殷保群	中国科学技术大学自动化系	72	533	10.0	20.0
3	唐昊	中国科学技术大学自动化系	11	126	7.0	11.0