云环境下影响数据分布并行应用执行效率的因素分析

• 作者: 俞茂义 李金溶 郏文博 陈旺虎 马生俊
• 来源期刊: 计算机应用
• 学科: 工学
• 关键词: 云环境 数据分布并行应用 MapReduce 效率 成本
• 年，卷（期）: 2017,（7）
• 所属期刊栏目: 先进计算
• 页码范围: 1883-1887
• 页数: 5页
• 分类号: TP301|TP393.027
• 字数: 6109字
• 语种: 中文
• DOI: 10.11772/j.issn.1001-9081.2017.07.1883

摘要

云环境下,类似MapReduce的数据分布并行应用被广泛运用.针对此类应用执行效率低、成本高的问题,以Hadoop为例,首先,分析该美应用的执行方式,发现数据量、节点数和任务数是影响其效率的主要因素;其次,探讨以上因素对应用效率的影响;最后,通过实验得出在数据量一定的情况下,增加节点数不会明显提高应用的执行效率,反而极大地增加执行成本;当任务数接近节点数时,应用的执行效率较高、成本较低.该结论为云环境中类似MapReduce的数据分布并行应用的效率优化提供借鉴,并为用户租用云资源提供参考.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	陈旺虎	西北师范大学计算机科学与工程学院	25	88	5.0	7.0
2	俞茂义	西北师范大学计算机科学与工程学院	5	24	4.0	4.0
3	马生俊	西北师范大学计算机科学与工程学院	5	13	3.0	3.0
4	李金溶	西北师范大学计算机科学与工程学院	2	7	2.0	2.0
5	郏文博	西北师范大学计算机科学与工程学院	2	7	2.0	2.0