基于时序差分学习的充电站有序充电方法

• 作者: 江明 许庆强 季振亚
• 来源期刊: 电力工程技术
• 关键词: 电动汽车 有序充电 无模型强化学习 数据驱动方法 马尔可夫决策过程(MDP)
• 年，卷（期）: 2021,（1）
• 所属期刊栏目: 智能电网技术|Smart Grid Technologies
• 页码范围: 181-187
• 页数: 7页
• 分类号: TM76
• 语种: 中文
• DOI: 10.12158/j.2096-3203.2021.01.026

摘要

电动汽车有序充电是智能用电领域的重要议题.传统的模型驱动方法需对充电行为建模,但受相关参数的强随机性等影响,相关模型不能完全反映充电行为的不确定性.考虑到数据驱动下的无模型强化学习(MFRL)具有不依赖先验建模、适应强非线性关系样本数据的优势,提出将其应用于充电站的有序充电负荷优化.针对性地构建以用户充电需求能否获得满足为状态的马尔可夫决策过程(MDP),并利用充电完成度指标和满意度惩罚项改进代价函数.具体采用增量式的时序差分学习(TDL)算法训练历史数据,以保证数据规模下的计算性能.算例以充电站实测数据为环境,结果表明,在无需对充电行为进行先验建模的情况下,所提方法能够准确、快速地制定充电站有序充电计划.