Hadoop集群公平调度算法的改进与实现

• 作者: 张鹏 李鑫
• 来源期刊: 电脑知识与技术：学术交流
• 学科: 工学
• 关键词: 公平调度 延时分配 MAPREDUCE HADOOP
• 年，卷（期）: dnzsyjsxsb_2012,（1）
• 页码范围: 166-168
• 页数: 3页
• 分类号: TP311

摘要

Hadoop作为MapReduce的开源实现被越来越多的企业使用。但是当Hadoop集群中出现较多的小作业时,使用其内置的调度算法就会降低整个系统的吞吐率[1]。该文针对这个不足,提出了基于公平调度的延时调度算法。通过设定一定的延时来保证数据的本地性,实验结果表明改进的调度算法可以提高整个系统的吞吐率。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张鹏		48	175	6.0	12.0
2	李鑫		11	39	4.0	6.0