基于Hadoop的小文件分布式存储技术研究

• 作者: 袁晓春
• 来源期刊: 机电工程技术
• 学科: 工学
• 关键词: 分布式存储 HDFS MapReduce
• 年，卷（期）: 2014,（12）
• 所属期刊栏目: 加工技术与机床
• 页码范围: 159-161,206
• 页数: 4页
• 分类号: TM73
• 字数: 1466字
• 语种: 中文
• DOI: 10.3969/j.issn.1009-9492.2014.12.040

摘要

HDFS （Hadoop Distributed File System）以其高容错性、高伸缩性等优点，允许用户将Hadoop部署在低廉的硬件上，广泛适用于大文件存储。然而对于海量小文件，因为内存开销过高，因此对数据的存储技术提出了更高的要求。基于Hadoop分布式文件系统(HDFS)架构，研究小文件在Hadoop架构下的数据处理策略，通过实验将其与传统的文件系统的读写、计算速度进行比较。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	袁晓春		6	5	1.0	2.0