大数据存储架构和算法研究综述

• 作者: 冯超超 廖卓凡 杨俊杰
• 来源期刊: 计算机应用
• 学科: 工学
• 关键词: 大数据 数据部署 分布式文件系统 MapReduce Hadoop
• 年，卷（期）: 2016,（9）
• 所属期刊栏目: 大数据
• 页码范围: 2465-2471
• 页数: 7页
• 分类号: TP393
• 字数: 10384字
• 语种: 中文
• DOI: 10.11772/j.issn.1001-9081.2016.09.2465

摘要

随着大数据计算需求的增长,集群的处理速度需要得到快速的提升,然而目前大数据处理框架的处理性能已逐渐满足不了这种快速增长的需求.由于集群的存储架构是分布式存储,因此数据的存放在大数据处理过程中成为影响集群的处理性能的因素之一.首先,对当今的分布式文件存储系统的结构进行了介绍;接着,根据不同的优化目标,例如减少网络负载、负载均衡、降低能耗和高容错性等,对近年国内外大数据存储算法的研究进行了总结,分析和对比了已有算法的优点以及存在的问题;最后,对大数据存储架构和优化算法设计的挑战和未来研究方向作了展望.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	冯超超	国防科技大学计算机学院	4	7	1.0	2.0