基于大数据技术调度端电网模型管理和分析架构

• 作者: 张令涛 张浩 李新鹏 沈国辉 赵林 郭子明 马仲佳
• 来源期刊: 电网技术
• 学科: 工学
• 关键词: ETL MapReduce 复合索引 大数据 电网模型
• 年，卷（期）: 2017,（12）
• 所属期刊栏目: 国家重点研发计划
• 页码范围: 3750-3756
• 页数: 7页
• 分类号: TM734
• 语种: 中文
• DOI: 10.13335/j.1000-3673.pst.2017.1281

摘要

为了实现大运行体系下的共享多标准电网模型的统计和分析,提出了一种应用于调度端的基于大数据技术的电网模型管理和分析的架构.首先分析了大数据存储结构的特点,根据电网模型特点采用文本式结构保存电网模型,设计出结构化的主键值表征电网模型的时间、空间和应用多维度的扩展.然后研究了多源异构电网模型的ETL(extract,transform, load)技术,将调度端电网模型提取转存至分布式大数据平台.采用MapReduce 并行计算框架对模型数据进行分布式计算,为了提高分布式计算的效率,降低I/O 消耗,采用索引技术对模型数据进行处理,减少各节点对全表数据进行扫描的次数.最后在调度端图形编辑器中,利用所提出的模型分析技术实现了电网图形模型的搜索,利用热度图实现了大数据搜索结果的可视化展示,并通过实例证明了所提方法的有效性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	郭子明		12	57	4.0	7.0
2	张浩		8	65	5.0	8.0
3	李新鹏		9	28	3.0	5.0
4	赵林		5	2	1.0	1.0
5	张令涛		1	0	0.0	0.0
6	马仲佳		1	0	0.0	0.0
7	沈国辉		1	0	0.0	0.0