同构Hadoop环境作业执行时间计算方法

• 作者: 张霄宏 沈记全 海林鹏 贾宗璞 赵文涛
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: Hadoop MapReduce 作业执行时间 调度
• 年，卷（期）: 2014,（10）
• 所属期刊栏目: 工程与应用
• 页码范围: 249-252
• 页数: 4页
• 分类号: TP316.4
• 字数: 3479字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.1304-0421

摘要

执行时间是作业调度的重要参考因素之一。通过分析Hadoop MapReduce环境作业的执行特征，提出了以map任务和reduce任务执行时间为输入，估算作业执行时间的方法。该方法在一定假设条件下，借助作业预执行来获取map任务和reduce任务的执行时间。实验结果表明，该方法估算作业执行时间的误差率小于7%。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	赵文涛	河南理工大学计算机科学与技术学院	32	158	7.0	11.0
2	海林鹏	河南理工大学计算机科学与技术学院	15	49	4.0	6.0
3	沈记全	河南理工大学现代教育中心	59	181	6.0	10.0
4	贾宗璞	河南理工大学计算机科学与技术学院	77	559	10.0	21.0
5	张霄宏	中国科学院深圳先进技术研究院	22	106	4.0	9.0