电力全业务统一数据中心突发性数据处理任务调度方法

• 作者: 刘庭辉 王德文
• 来源期刊: 电力系统自动化
• 关键词: 全业务统一数据中心 突发性海量数据 任务调度 动态实时优先级
• 年，卷（期）: 2018,（8）
• 所属期刊栏目: 研制与开放
• 页码范围: 177-184
• 页数: 8页
• 字数: 7670字
• 语种: 中文
• DOI: 10.7500/AEPS20170802001

摘要

国家电网有限公司正在开展电力全业务统一数据中心的建设,以实现全业务范围、全数据类型、全时间维度数据的统一存储、管理分析.在全业务范围数据全量推送过程中,尤其在突发性海量数据涌入时,全业务统一数据中心的处理能力面临着巨大挑战,数据处理任务调度方法是提高其数据处理能力的关键.通过对电力全业务统一数据中心设计方案和架构的分析,给出一种数据处理任务控制调度模型,从任务的时间和有效价值两方面综合分析任务的优先级.提出了基于多级队列的动态实时优先级调度(DRPS)算法,并分析了不同类型处理任务的优先级动态变化趋势.采用CloudSim平台模拟全业务统一数据中心的数据抽取-转换-加载(ETL)任务,并进行仿真测试.结果表明DRPS算法相比于动态价值密度(DVD)算法及最早截止优先(EDF)算法,在截止期错失率方面有明显下降,任务完成率也有明显提高.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王德文	华北电力大学控制与计算机工程学院	61	2241	26.0	47.0
2	刘庭辉	华北电力大学控制与计算机工程学院	1	7	1.0	1.0