基于可变长分块的分布式文件系统设计与实现

• 作者: 许艳艳 雷迎春 龚奕利
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: 固定长分块 可变长分块 分布式文件系统 随机写 元数据服务器
• 年，卷（期）: 2016,（5）
• 所属期刊栏目: 体系结构与软件技术
• 页码范围: 80-84,101
• 页数: 6页
• 分类号: TP391
• 字数: 5074字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-3428.2016.05.014

摘要

分布式文件系统受传统磁盘文件系统影响,大多使用固定大小的对象或者块来组织和管理文件.定长的分块不适合随机写或插入写,开销大且性能差,但典型的用户约有25％的文件操作是随机写.针对上述现状,提出一种基于内容的可变长文件分块方法,使用拉宾指纹算法对文件进行分块,并根据文件的内容标识文件块.为更准确地指定写类型,提高写性能,给出与POSIX语义兼容的写接口.通过修改Ceph实现一种新的分布式文件系统VarFS,提供文件的可变长分块并支持新的写接口.实验结果表明,由于减少网络数据传输量,VarFS在随机写延迟和带宽消耗量上比Ceph减少了1个～2个数量级.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	雷迎春	中国科学院计算技术研究所	14	182	7.0	13.0
2	龚奕利	武汉大学计算机学院	15	67	4.0	7.0
3	许艳艳	武汉大学计算机学院	1	3	1.0	1.0