Hadoop MapReduce新旧架构的对比研究综述

• 作者: 于金良 朱志祥 李聪颖
• 来源期刊: 计算机与数字工程
• 学科: 工学
• 关键词: MapReduce YARN 任务调度 资源分配
• 年，卷（期）: 2017,（1）
• 所属期刊栏目: 系统结构
• 页码范围: 83-87
• 页数: 5页
• 分类号: TP274.2
• 字数: 3501字
• 语种: 中文
• DOI: 10.3969/j.issn.1672-9722.2017.01.018

摘要

Hadoop MapReduce架构经过了一次重构,新旧架构有着巨大的差异.论文首先介绍了旧版本MapReduce的架构,作业执行的流程与其中的任务的调度、资源分配等,指出了旧框架的局限性.再介绍了新框架的架构,任务调度和资源分配等.并从二者的架构、任务调度、资源分配等方面进行了对比,指出了新框架的优势.新一代的MapReduce框架YARN是共享模式的,可以在同一集群上运行使用不同的计算框架编写的应用程序,同时也减少了运维的难度,提高了集群资源的利用率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	朱志祥		95	692	13.0	21.0
2	于金良		9	90	6.0	9.0
3	李聪颖		8	54	5.0	7.0