基于Markov切换空间的分布式协同接入控制模型

• 作者: 刘兴华 奚宏生
• 来源期刊: 太赫兹科学与电子信息学报
• 学科: 工学
• 关键词: Markov决策过程 Markov切换系统 性能势 策略迭代
• 年，卷（期）: 2013,（6）
• 所属期刊栏目: 电磁场与微波
• 页码范围: 970-976,980
• 页数: 8页
• 分类号: TN915
• 字数: 5859字
• 语种: 中文
• DOI: 10.11805/TKYDA201306.0970

摘要

基于3层架构的映射框架，本文以视频业务为主要研究对象，研究了分布式协同接入控制系统的建模和调控机理。不失一般性，假设视频业务需求近似服从泊松分布，而服务时间服从指数分布，将一个资源节点上的业务接入状态的演化用 Markov过程来描述，则所有的 N个资源节点的分布式协同接入控制可以由一个 Markov 切换空间控制过程来阐述。针对构建的 Markov切换空间控制系统，基于系统灵敏度的观点对系统性能进行优化，本文提出了基于策略梯度的随机逼近算法；同时，证明了该随机逼近算法的收敛性。此外，本文给出了一个仿真实例来说明此随机逼近算法的有效性。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	奚宏生	中国科学技术大学信息科学技术学院自动化系	143	1241	17.0	29.0
2	刘兴华	中国科学技术大学信息科学技术学院自动化系	8	25	3.0	5.0