FlowS:一种MapReduce数据流公平调度方法

• 作者: 刘杰 叶丹 李奇原 许舒人
• 来源期刊: 计算机科学
• 学科: 工学
• 关键词: MapReduce数据流 资源管理 公平调度方法
• 年，卷（期）: 2012,（9）
• 所属期刊栏目: 数据库与数据挖掘
• 页码范围: 157-161,174
• 分类号: TP311
• 字数: 5509字
• 语种: 中文
• DOI: 10.3969/j.issn.1002-137X.2012.09.035

摘要

MapReduce Job的调度机制一直是学术研究的热点.在分析MapReduce数据流调度模型的基础上,提出一种面向MapReduce数据流的公平调度方法FlowS.该方法采用数据流池来分配资源以保证MapReduce数据流的隔离性,并且采用数据流池动态构建算法来确保资源的公平分配.实验表明,该调度方法可以有效提高Hadoop集群对MapReduce数据流的处理效率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	刘杰	中国科学院软件研究所软件工程技术中心	218	1905	24.0	36.0
2	叶丹	中国科学院软件研究所软件工程技术中心	26	397	10.0	19.0
3	许舒人	中国科学院软件研究所软件工程技术中心	22	312	9.0	17.0
4	李奇原	中国科学院软件研究所软件工程技术中心	3	18	2.0	3.0