面向数据集成的分布式ETL研究与设计

• 作者: 张孟春
• 来源期刊: 软件导刊
• 学科: 工学
• 关键词: 数据集成 分布式 ETL 消息中间件
• 年，卷（期）: 2017,（11）
• 所属期刊栏目: 数据库与信息处理
• 页码范围: 197-199
• 页数: 3页
• 分类号: TP391
• 字数: 3608字
• 语种: 中文
• DOI: 10.11907/rjdk.171780

摘要

针对数据分析融合平台建设中数据集成开发效率低、数据集成慢和数据网络分散等问题,提出跨网络传输的分布式ETL框架设计.通过对主流ETL工具进行分析,总结了ETL的工作原理及过程,设计了一种基于消息中间件面向数据集成的分布式ETL框架.使用该框架处理数据集成任务时,提交数据集成过程的描述文件进行数据处理.基于元模型驱动和面向切面设计思想,设计数据任务执行引擎和控制模型.基于该框架开发的工具可使数据开发人员从大量重复的数据操作中解脱出来,将更多精力放在数据的逻辑处理上.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张孟春	西南交通大学信息科学与技术学院	1	6	1.0	1.0