基于Storm平台的数据迁移合并节能策略

• 作者: 于炯 卞琛 廖彬 李梓杨 蒲勇霖 鲁亮
• 来源期刊: 通信学报
• 学科: 工学
• 关键词: 大数据 Storm 资源约束 数据迁移 能耗
• 年，卷（期）: 2019,（12）
• 所属期刊栏目: 学术论文
• 页码范围: 68-85
• 页数: 18页
• 分类号: TP311
• 字数: 15857字
• 语种: 中文
• DOI: 10.11959/j.issn.1000?436x.2019226

摘要

针对Storm存在低效率、高能耗的问题,通过分析Storm平台的基本框架与拓扑结构,设计了资源约束模型、最优线程数据重组原则和节点降压原则,并在此基础上提出了基于Storm平台的数据迁移合并节能策略(DMM-Storm),包括资源约束算法、数据迁移合并算法和节点降压算法.其中资源约束算法根据资源约束模型,判断工作节点是否允许数据的迁移;数据迁移合并算法根据最优线程数据重组原则,设计了最优的线程数据迁移方法;节点降压算法根据节点降压限制条件,降低了工作节点的电压.实验结果表明,与现有的节能策略相比,执行DMM-Storm在不影响集群性能的前提下,有效降低了能耗.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	于炯	新疆大学信息科学与工程学院	176	1315	20.0	28.0
2	廖彬	新疆财经大学统计与信息学院	34	172	8.0	10.0
3	李梓杨	新疆大学信息科学与工程学院	9	57	4.0	7.0
4	蒲勇霖	新疆大学信息科学与工程学院	14	40	4.0	5.0
5	鲁亮	中国民航大学计算机科学与技术学院	4	2	1.0	1.0
6	卞琛	广东金融学院互联网金融与信息工程学院	3	6	2.0	2.0