海量COMTRADE数据并行解析算法

• 作者: 姚兰 桂勋 钱清泉
• 来源期刊: 电力系统自动化
• 学科: 工学
• 关键词: 海量数据 暂态数据交换通用格式(COMTRADE) 多核 流水线 并行解析 电力系统
• 年，卷（期）: 2009,（15）
• 所属期刊栏目: 研制与开发
• 页码范围: 62-66
• 页数: 5页
• 分类号: TM734
• 字数: 2922字
• 语种: 中文
• DOI: 10.3321/j.issn:1000-1026.2009.15.013

摘要

针对电力系统暂态监测数据向海量化发展的趋势,以及对各种串行编程分析软件造成的计算压力,研究了一种基于多核的、采用流水线设计思想的海量电力系统暂态数据交换通用格式(COMTRADE)数据文件并行解析算法.在面向二进制格式的并行解析算法中,采用了2阶段的流水线步骤:第1阶段为文件读取;第2阶段为多线程解析.在面向美国标准信息交换码(ASCII)格式的并行解析算法中,采用了3阶段的流水线步骤:前2个阶段与二进制格式的并行解析算法一样,第3阶段为块边缘解析,打破了传统的串行文本解析算法.算法通过有效利用以往被忽视的数据文件中的序号信息,大幅提升了并行解析的并行度.试验证明此算法可获得相当高的加速比,并且可随着CPU核数的增加和COMTRADE数据文件的加大获得线性加速比.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	钱清泉	西南交通大学电气工程学院自动化研究所	169	4754	36.0	63.0
2	桂勋	电子科技大学空天科学技术研究院	9	64	6.0	7.0
3	姚兰	成都信息工程学院控制工程系	23	144	8.0	10.0