基于集群规模调整的节能存储策略

• 作者: 妙晓龙 钟将 陈浩
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: Hadoop Hadoop分布式文件系统 节能 规模调整 缓存
• 年，卷（期）: 2017,（24）
• 所属期刊栏目: 大数据与云计算
• 页码范围: 80-85
• 页数: 6页
• 分类号: TP338.8
• 字数: 6248字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.1611-0463

摘要

根据谷歌数据中心研究报告,传统数据中心存在高能耗、低利用率的问题.通过研究集群数据块访问规律,提出一种基于集群规模调整的Hadoop分布式文件系统(HDFS)节能存储策略,实现HDFS高效节能存储.策略主要在集群区域划分、数据块迁移策略优化、缓存机制等方面作出了改进.实验结果表明:使用该节能策略的HDFS比传统HDFS节能35%~40%,其中0.3%的访问需要唤醒服务器,同时引入缓存策略对集群的性能提高了5.1%.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	陈浩	重庆大学计算机学院	10	23	4.0	4.0
2	妙晓龙	重庆大学计算机学院	1	3	1.0	1.0
3	钟将		1	3	1.0	1.0