公共数据中心的ETL系统设计与实现

• 作者: 夏小玲 赵俊
• 来源期刊: 计算机应用与软件
• 学科: 工学
• 关键词: ETL 数据仓库 数据抽取 数据转换 数据质量
• 年，卷（期）: 2011,（10）
• 所属期刊栏目: 应用技术与研究
• 页码范围: 167-169,190
• 分类号: TP311.133
• 字数: 4703字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-386X.2011.10.047

摘要

ETL过程是构建数据仓库的重要步骤.大多数现有ETL系统在数据量较大时处理效率偏低.根据ETL在公共数据中心的实际应用改进了原有的ETL结构.鉴于公共数据保密性的特点,设计了数据不同的获取方式；在设置数据转换规则的过程中结合相应领域知识,保证数据质量；前置机之间实行负载均衡,同时把数据转换的不同步骤分配到两台ETL服务器来完成,保证抽取和转换效率.通过实验证明了该ETL系统具有较好的效率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	夏小玲	东华大学计算机科学与技术学院	42	251	9.0	14.0
2	赵俊	东华大学计算机科学与技术学院	1	17	1.0	1.0