基于深度强化学习的交通信号控制方法

• 作者: 刘琼 孙浩 赵佳宝 陈春林
• 来源期刊: 计算机科学
• 学科: 工学
• 关键词: 智能交通 交通信号控制 深度强化学习 分布式强化学习
• 年，卷（期）: 2020,（2）
• 所属期刊栏目: 人工智能
• 页码范围: 169-174
• 页数: 6页
• 分类号: TP181
• 字数: 6104字
• 语种: 中文
• DOI: 10.11896/jsjkx.190600154

摘要

交通信号的智能控制是智能交通研究中的热点问题.为更加及时有效地自适应协调交通,文中提出了一种基于分布式深度强化学习的交通信号控制模型,采用深度神经网络框架,利用目标网络、双Q网络、价值分布提升模型表现.将交叉路口的高维实时交通信息离散化建模并与相应车道上的等待时间、队列长度、延迟时间、相位信息等整合作为状态输入,在对相位序列及动作、奖励做出恰当定义的基础上,在线学习交通信号的控制策略,实现交通信号Agent的自适应控制.为验证所提算法,在SUMO(Simulation of Urban Mobility)中相同设置下,将其与3种典型的深度强化学习算法进行对比.实验结果表明,基于分布式的深度强化学习算法在交通信号Agent的控制中具有更好的效率和鲁棒性,且在交叉路口车辆的平均延迟、行驶时间、队列长度、等待时间等方面具有更好的性能表现.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	赵佳宝	南京大学控制与系统工程系	33	637	14.0	25.0
2	陈春林	南京大学控制与系统工程系	7	114	2.0	7.0
3	孙浩	南京大学控制与系统工程系	2	5	1.0	2.0
4	刘琼	南京大学控制与系统工程系	2	0	0.0	0.0