一种轻量级架构的ETL系统设计与实现

• 作者: 杨路明 黄怀毅
• 来源期刊: 计算机技术与发展
• 学科: 工学
• 关键词: ETL 数据抽取 数据转换 数据装载 架构
• 年，卷（期）: 2008,（6）
• 所属期刊栏目: 应用开发研究
• 页码范围: 202-205
• 页数: 4页
• 分类号: TP311
• 字数: 4298字
• 语种: 中文
• DOI: 10.3969/j.issn.1673-629X.2008.06.058

摘要

ETL系统是构建数据仓库的关键组件.通过数据抽取、转换和装载工作,完成处理海量数据和构建数据仓库的任务.如何提高数据处理效率和增强系统稳定性是值得研究的问题.根据电信资源数据省级集中分析系统下的实际应用背景,提出了一种轻量级架构的ETL系统,该架构采取的是"化整为零"的思想,把原先核心的抽取和转换的任务部分划分到各个相应的子系统中做初步的处理,这样处理的优点在于应用中减轻了核心ETL引擎的承载负担,各个抽取任务单独进行互不依赖,提高了抽取效率.通过在具体应用环境下系统运行表明采用该架构ETL系统具良好的使用效果.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	黄怀毅	中南大学信息科学与工程学院	1	14	1.0	1.0
2	杨路明	中南大学信息科学与工程学院	181	1754	20.0	35.0