参数未知的离散系统Q-学习优化状态估计与控制

• 作者: 李金娜 马士凯
• 来源期刊: 控制与决策
• 学科: 工学
• 关键词: 非策略Q-学习 最优控制 状态观测器 分离定理 离散系统 近似动态规划
• 年，卷（期）: 2020,（12）
• 所属期刊栏目: 论文与报告
• 页码范围: 2889-2897
• 页数: 9页
• 分类号: TP13
• 语种: 中文
• DOI: 10.13195/j.kzyjc.2019.0180

摘要

控制系统的应用中存在状态不能直接测量或测量成本高的实际问题,给模型参数未知的系统完全利用状态数据学习最优控制器带来挑战性难题.为解决这一问题,首先构建具有状态观测器且系统矩阵中存在未知参数的离散线性增广系统,定义性能优化指标;然后基于分离定理、动态规划以及Q-学习方法,给出一种具有未知模型参数的非策略Q-学习算法,并设计近似最优观测器,得到完全利用可测量的系统输出和控制输入数据的非策略Q-学习算法,实现基于观测器状态反馈的系统优化控制策略,该算法的优点在于不要求系统模型参数全部已知,不要求系统状态直接可测,利用可测量数据实现指定性能指标的优化;最后,通过仿真实验验证所提出方法的有效性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	李金娜		28	103	6.0	9.0
2	马士凯		2	0	0.0	0.0