SFFS：低延迟的面向小文件的分布式文件系统

• 作者: 吴兴博 王雷 王鲁俊 龙翔
• 来源期刊: 计算机科学与探索
• 学科: 工学
• 关键词: 小文件 低延迟高可用 分布式存储
• 年，卷（期）: 2014,（4）
• 所属期刊栏目: 系统软件与软件工程
• 页码范围: 438-445
• 页数: 8页
• 分类号: TP302
• 字数: 6930字
• 语种: 中文
• DOI: 10.3778/j.issn.1673-9418.1311014

摘要

社交网站和电子商务等网络服务发展迅速，这类服务需要存储大量图片、音乐、微博文本等小文件。传统的分布式存储系统，如HDFS（Hadoop distributed file system），是面向大文件而设计的，在存储小文件时会产生元数据开销过大，访问延迟较高等问题，不能适应存储海量小文件的应用环境。分析了TFS（Taobao file system）的系统架构和读写流程，发现TFS在每次读/写过程中至少要建立3次网络连接，增大了读写延迟。针对海量小文件存储带来的挑战和TFS存在的问题，提出了一种新的低延迟、高可用的面向海量小文件的分布式存储方案，并实现了分布式文件系统SFFS（small-file file system）。性能测试表明，SFFS和TFS相比，写延迟降低了76.6%，读延迟降低了约10%。通过对系统结构的分析，相比于TFS，SFFS在中心节点的负载更轻，失效恢复更快，在可用性方面更有优势。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	龙翔	北京航空航天大学计算机学院	65	387	11.0	17.0
2	王雷	北京航空航天大学计算机学院	57	257	9.0	13.0
3	王鲁俊	北京航空航天大学计算机学院	1	15	1.0	1.0
4	吴兴博	北京航空航天大学计算机学院	1	15	1.0	1.0