同构Hadoop集群环境下改进的延迟调度算法

• 作者: 杨群 柯何杨 段汐 王立松
• 来源期刊: 计算机应用研究
• 关键词: 本地化 延迟调度 延迟—容量调度
• 年，卷（期）: 2013,（5）
• 所属期刊栏目: 软件技术研究
• 页码范围: 1397-1401
• 页数: 5页
• 分类号: TP311
• 语种: 中文
• DOI: 10.3969/j.issn.1001-3695.2013.05.029

摘要

在Hadoop框架下计算资源和数据资源可以在不同物理位置的特点产生本地化问题.延迟调度算法的产生旨在解决本地化问题,此算法根据任务待处理数据的物理位置作为作业的计算节点,调度任务至目标节点.但是可能出现同一作业中若干任务集中运行在某一计算节点,导致作业达不到理想的并行效果.针对原有的延迟调度算法,提出延迟一容量调度算法,允许部分任务选择非本地化节点作为原延迟调度算法中任务的目标计算节点,以提高作业的响应时间与增加作业的并行程度.最后通过实验对比分析,改进后的算法在执行效率和并行效果明显优于原延迟调度算法.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王立松	南京航空航天大学计算机科学与技术学院	64	442	11.0	19.0
2	杨群	南京航空航天大学计算机科学与技术学院	12	57	4.0	7.0
3	柯何杨	南京航空航天大学计算机科学与技术学院	3	20	2.0	3.0
4	段汐	南京航空航天大学计算机科学与技术学院	4	21	2.0	4.0