基于Spark的大电网广域时空序列分析平台构建

• 作者: 刘丽平 刘道伟 王泽忠 袁宝超
• 来源期刊: 电力建设
• 学科: 工学
• 关键词: 能源互联网 Spark 时空序列 流计算 聚类
• 年，卷（期）: 2016,（11）
• 所属期刊栏目: 电力大数据
• 页码范围: 48-54
• 页数: 7页
• 分类号: TM73|TP391.9
• 字数: 5495字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-7229.2016.11.008

摘要

为了适应能源互联网发展趋势及日益复杂的运行环境,亟需依托大数据技术,提升能源互联网多源大数据的挖掘深度及应用效率.首先,针对大电网广域时空序列数据,阐述了Spark在分布式计算中的优势,阐明大数据平台建设目标,设计了基于Spark的电力大数据平台架构,并对平台各个层次进行详细的论述.其次,描述了Spark针对电网时空序列数据的处理过程.最后,在搭建的Spark和Hadoop实验环境基础上,对典型聚类算法进行性能对比测试,验证了Spark相对于Hadoop的MapReduce计算模型数据处理的优势,为下一步研究工作奠定了基础.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王泽忠	华北电力大学电气与电子工程学院	92	974	19.0	27.0
2	刘丽平		12	666	8.0	12.0
3	刘道伟		21	166	8.0	12.0
4	袁宝超	华北电力大学电气与电子工程学院	1	7	1.0	1.0