平均排队长度差最小的单交叉口在线Q学习模型

• 作者: 刘喜敏 卢守峰 张术
• 来源期刊: 公路交通科技
• 学科: 交通运输
• 关键词: 交通工程 在线Q学习 配时优化 排队长度
• 年，卷（期）: 2014,（11）
• 所属期刊栏目: 智能运输系统与交通工程
• 页码范围: 116-122
• 页数: 7页
• 分类号: U491
• 字数: 4197字
• 语种: 中文
• DOI: 10.3969/j.issn.1002-0268.2014.11.019

摘要

为改善交叉口排队长度管理,避免交叉口某个方向排队长度过长,采用强化学习理论建立了以平均排队长度差最小为优化目标的在线Q学习模型.针对控制性能指标相对于邻近的配时方案不敏感的特点,提出了以平均排队长度差作为基本单位重新构造奖励函数,目的是拉大各行为对应的Q值差距,提高模型的收敛速度和鲁棒性.集成Excel VBA,Vissim,Matlab建立了在线仿真平台,作为计算环境对算例进行了计算.算例中利用GPS数据对Vissim软件中车辆加减速度曲线进行了标定.计算结果表明以平均排队长度差作为优化目标能够提高各个方向排队长度的平衡性,优化整个交叉口的时空资源;建立的在线Q模型具有学习能力和较快的计算速度,模型能否收敛受到周期取值和可选行为数量的影响.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	卢守峰	长沙理工大学交通运输工程学院	22	150	7.0	12.0
2	刘喜敏	长沙理工大学交通运输工程学院	9	81	6.0	9.0
3	张术	长沙理工大学交通运输工程学院	3	14	2.0	3.0