分布式文件系统中海量小文件异步创建技术

• 作者: 吴雪丽 张军伟 杨洪章 齐颖
• 来源期刊: 网络新媒体技术
• 关键词: 海量小文件 低延迟 文件创建 缓存
• 年，卷（期）: 2015,（2）
• 所属期刊栏目: 网络通信与计算技术
• 页码范围: 16-23
• 页数: 8页
• 字数: 4623字
• 语种: 中文

摘要

海量小文件应用已经渗透到高性能计算、企业办公、互联网等多个领域.由于小文件主要存储在分布式文件系统中,海量小文件访问性能已经成为分布式文件系统亟待解决的难题.影响性能的关键因素是高比例高并发的元数据同步访问,尤其在高并发小粒度创建应用中,元数据同步网络交互增加了小文件访问延迟.本文以pNFS分布式文件系统为基础,研究降低海量小文件创建应用延迟的关键技术,设计并实现了一种基于目录可写授权的全异步客户端文件创建框架及其优化技术,测试表明,该技术可将分布式文件系统小文件创建性能提升近500倍.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	杨洪章	中国科学院计算技术研究所	2	4	2.0	2.0
5	张军伟	中国科学院计算技术研究所	9	49	4.0	6.0
6	齐颖	中国科学院计算技术研究所	1	2	1.0	1.0
10	吴雪丽		2	3	1.0	1.0