基于Hadoop平台的分布式ETL系统设计与实现

• 作者: 何刚 孙莉 李晨翔
• 来源期刊: 福建电脑
• 关键词: Hadoop 分布式ETL 维度 事实 并行处理
• 年，卷（期）: 2013,（11）
• 所属期刊栏目: 应用与开发
• 页码范围: 111-114
• 页数: 4页
• 字数: 3561字
• 语种: 中文

摘要

为了解决传统的抽取、转换和加载工具处理数据仓库中海量数据的效率问题,设计并实现了基于Hadoop平台的分布式ETL系统.详细的探讨了渐变维度、雪花维度、大维度数据和事实数据的并行处理.实验结果表明,与Hive数据仓库相比,该分布式ETL系统在并行处理数据仓库中海量数据的问题上,具有更高的效率和扩展性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	孙莉	东华大学计算机科学与技术学院	56	452	12.0	17.0
2	何刚	东华大学计算机科学与技术学院	2	15	2.0	2.0
3	李晨翔	东华大学计算机科学与技术学院	1	6	1.0	1.0