Hadoop 副本放置策略

• 作者: 刘一伟 李云龙 王亚光 邵秀丽
• 来源期刊: 智能系统学报
• 学科: 工学
• 关键词: 云存储 Hdfs 副本放置 存储均衡 存储节点
• 年，卷（期）: 2013,（6）
• 页码范围: 489-496
• 页数: 8页
• 分类号: TP399
• 字数: 6592字
• 语种: 中文
• DOI: 10.3969/j.issn.1673-4785.201210036

摘要

分布式文件系统（ Hdfs）采用随机的副本放置策略使得系统在运行一段时间后会出现数据分布不均衡的情况，从而降低数据的可靠性和读取速率。为解决Hdfs默认副本放置策略存在的问题，对Hdfs副本放置策略进行改进：在副本放置选择时优先考虑存储使用率低的节点。模拟实验一测试了机架数目对于算法的影响，结果显示改进后的副本放置策略中，机架数目对集群的均衡性影响很小，显示出较好的均衡性。模拟实验二测试了随着写入数据的增加，比较了使用改进前后的副本放置策略集群中节点使用率的标准差，证实了改进后的副本放置策略在存储均衡方面较原放置策略有着更好的表现。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	邵秀丽	南开大学信息技术科学学院	60	388	13.0	17.0
2	王亚光	南开大学信息技术科学学院	2	25	1.0	2.0
3	刘一伟	北京大学数学科学学院	5	49	2.0	5.0
4	李云龙	南开大学信息技术科学学院	4	26	1.0	4.0