海量小文件元数据的分布式存储与检索

• 作者: 周国安 李强 胡旭 陈新
• 来源期刊: 空军预警学院学报
• 学科: 工学
• 关键词: 海量小文件 元数据 分布存储 并行检索
• 年，卷（期）: 2014,（6）
• 所属期刊栏目: 军事信息技术
• 页码范围: 427-431
• 页数: 5页
• 分类号: TP333
• 字数: 5508字
• 语种: 中文
• DOI: 10.3969/j.issn.2095-5839.2014.06.010

摘要

针对现有分布式文件系统处理海量小文件时存在的主节点元数据处理性能瓶颈问题，提出采用分布式文件来存储元数据，并通过元数据缓冲和Hash映射实现元数据的分布；采用MapReduce并行程序对元数据检索进行了实现，并指出了并行检索中存在的问题，提出采取局部位图索引对元数据检索进行了优化。最后通过实验进行了验证，实验结果证明，该方法实现了海量元数据的分布式存储与检索，避免了现有分布式文件系统在处理海量小文件时存在的主节点单点性能瓶颈。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	陈新		25	69	4.0	7.0
2	李强		11	50	3.0	7.0
3	周国安		4	36	3.0	4.0
4	胡旭		4	36	3.0	4.0