基于MapReduce的分布式ETL体系结构研究

• 作者: 宋杰 赵水宁 郝文宁 陈刚 靳大尉
• 来源期刊: 计算机科学
• 学科: 工学
• 关键词: ETL MapReduce 分布式
• 年，卷（期）: 2013,（6）
• 所属期刊栏目: 软件与数据库技术
• 页码范围: 152-154
• 页数: 3页
• 分类号: TP311
• 字数: 3121字
• 语种: 中文

摘要

针对传统ETL工具集中式执行方式的不足,提出了一种基于MapReduce的分布式ETL体系结构——M DETL(MapReduce Distributed ETL).该体系结构采用MapReduce并发处理海量数据的并行编程模型,结合分布式ETL的集群运算方法,实现了集群分布式执行ETL流程,从而提高了整个ETL系统的灵活性和吞吐率,并具有较好的可扩展性和负载平衡性能,提高了执行效率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	郝文宁	解放军理工大学工程兵工程学院	64	544	13.0	20.0
2	宋杰	解放军理工大学工程兵工程学院	6	76	4.0	6.0
3	陈刚	解放军理工大学工程兵工程学院	32	353	12.0	18.0
4	靳大尉	解放军理工大学工程兵工程学院	14	117	5.0	10.0
5	赵水宁	解放军理工大学工程兵工程学院	14	176	7.0	13.0