马尔柯夫决策模型探讨

• 作者: 刘义山 李骥昭
• 来源期刊: 机电产品开发与创新
• 学科: 数学
• 关键词: 马尔柯夫链 决策问题 策略问题 随机过程 状态概率 转移概率
• 年，卷（期）: 2011,（6）
• 所属期刊栏目: 开发与创新
• 页码范围: 29-31
• 分类号: O226
• 字数: 3046字
• 语种: 中文
• DOI: 10.3969/j.issn.1002-6673.2011.06.011

摘要

讨论了随机性决策问题,在此类问题中,系统的状态概率是不断变化的.马尔可夫过程的基本思想是根据当前状态的概率分布来推断未来状态的分布,并以此做出判断和决策；讨论了遍历马尔柯夫链的瞬态行为,要完成瞬态行为需要求出其基本方程组,为此必须用到z变换分析方法.Z变换可将差分方程转化为对应的普遍方程,一个非负离散的时间函数f(n)的z变换为f(z)=∞∑n=0 f(n)zn,函数变换是一一对应的,同时,原函数f(n)与其z变换间可以相互转化.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	刘义山		15	25	3.0	4.0
2	李骥昭		15	25	3.0	4.0