一种轻量级电网实时数据ETL系统的设计与实现

• 作者: 吴克河 段成 王增平
• 来源期刊: 电力系统保护与控制
• 学科: 工学
• 关键词: ETL系统 异构数据 增量 任务调度 跨平台
• 年，卷（期）: 2010,（18）
• 页码范围: 174-177,182
• 分类号: TM76
• 字数: 3792字
• 语种: 中文
• DOI: 10.3969/j.issn.1674-3415.2010.18.034

摘要

以某省电网实时数据监测系统的数据中心建设项目为背景,提出了一种轻量级的,适合于电网实时数据迁移与同步更新的ETL系统解决方案.系统支持多种关系型数据库和数据文件,提供全量、增量、主细表等多种自定义模式数据迁移方案.系统利用JDBC数据库访问技术、JSR-166的Util.Concurrent并发线程包以及SWT技术,结合元数据的管理,解决了异构数据的快速抽取、清洗转换与加载、任务的调度和跨平台运行的问题,并在实际应用中表现出了实用性和稳定性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	吴克河		47	410	12.0	19.0
3	王增平	华北电力大学电气与电子工程学院	190	3499	31.0	51.0
4	段成	华北电力大学电气与电子工程学院	3	23	3.0	3.0