一种分布式ETL工具的设计与实现

• 作者: 刘豹
• 来源期刊: 软件
• 学科: 工学
• 关键词: ETL Hadoop 分布式
• 年，卷（期）: 2013,（10）
• 所属期刊栏目: 软件工程
• 页码范围: 73-77
• 页数: 5页
• 分类号: TP311
• 字数: 4189字
• 语种: 中文
• DOI: 10.3969/j.issn.1003-6970.2013.10.027

摘要

传统的ETL工具有集中执行、对服务器性能要求高等缺点，针对这些缺点，本文提出了一种基于Hadoop的分布式ETL系统。该系统在分布式文件系统基础上，利用相应的数据过滤器和Hadoop强大的并行处理能力，实现了集群分布式执行ETL流程。该分布式ETL系统具有较高的可扩展性和吞吐效率，同时能够自动实现负载均衡，执行效率高。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	刘豹	北京邮电大学网络技术研究院	1	15	1.0	1.0