大数据应用中节点休眠结合MapReduce作业的能量感知调度方法

• 作者: 邵孟良 齐德昱
• 来源期刊: 计算机应用与软件
• 学科: 工学
• 关键词: MapReduce 节点休眠 大数据 能量感知调度 最小能量消耗
• 年，卷（期）: 2020,（6）
• 所属期刊栏目: 数据工程
• 页码范围: 40-47,82
• 页数: 9页
• 分类号: TP391
• 字数: 8936字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-386x.2020.06.009

摘要

针对大数据应用中,数据中心执行大规模数据密集型应用程序时能耗巨大的问题,提出一种节点休眠结合MapReduce作业的能量感知调度方法.构建一个能够同时提高MapReduce应用程序能效并满足服务水平协议(service level agreement,SLA)的系统框架,用于执行大规模数据处理;将节点休眠调度算法与单个Map-Reduce作业的能量感知调度问题建模为整数程序;结合两种能量感知的节点休眠MapReduce启发式调度算法(Node Dormancy MapReduce Scheduling Algorithms,NDMRSA-1和NDMRSA-2),以实现任务分配的自动映射和任务到机器插槽的自动归并,从而最大限度地减少执行应用程序时消耗的能量.实验结果表明,NDMRSA-1和NDMRSA-2能够找到接近最佳的工作调度,平均消耗的能量比通过最小化完工时间的通用实践调度程序少约40％,有效实现了作业时的能耗最小化.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	齐德昱	华南理工大学计算机科学与工程学院	142	1102	15.0	27.0
2	邵孟良	广州南洋理工职业学院信息工程学院	24	27	3.0	4.0