动态在线 Map/Reduce 流数据处理模型及作业拓扑管理协议

• 作者: 庄园 李洪亮 李翔 李聪 魏晓辉
• 来源期刊: 吉林大学学报（理学版）
• 学科: 工学
• 关键词: 流数据处理 Flexible workflow 模型 Map/Reduce 拓扑管理
• 年，卷（期）: 2015,（5）
• 所属期刊栏目: 计算机科学
• 页码范围: 950-955
• 页数: 6页
• 分类号: TP311.11
• 字数: 3330字
• 语种: 中文
• DOI: 10.13413/j.cnki.jdxblxb.2015.05.24

摘要

针对海量流数据的在线处理需求，提出一种不同于传统 Map/Reduce 流数据处理的系统模型 Flexible workflow.该模型对 workflow 处理单元进行在线 Map/Reduce 并行化，实现了 SPATE 系统；同时为该系统定义一组关于作业的建立、管理和维护的通信规程，即拓扑管理协议.SPATE 系统解决了在线 Map/Reduce 流数据处理过程中要求实时性及可扩展性的问题.实验验证了拓扑管理协议的有效性，拓扑管理协议能有效管理 Flexible workflow 流数据处理模型.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	魏晓辉	吉林大学计算机科学与技术学院	36	164	6.0	11.0
2	李聪	吉林大学计算机科学与技术学院	35	89	6.0	8.0
3	庄园	吉林大学计算机科学与技术学院	5	8	2.0	2.0
4	李洪亮	吉林大学计算机科学与技术学院	16	43	4.0	6.0
5	李翔	吉林大学计算机科学与技术学院	9	57	3.0	7.0