云环境下应用感知的动态重复数据删除机制

• 作者: 贺秦禄 贾雷刚 边根庆 邵必林
• 来源期刊: 西安交通大学学报
• 关键词: 在线重删 离线重删 缓存 云存储
• 年，卷（期）: 2018,（10）
• 页码范围: 24-30
• 页数: 7页
• 分类号: TP393.1
• 语种: 中文
• DOI: 10.7652/xjtuxb201810004

摘要

针对传统在线/离线重删对云存储系统中重删效率不高的问题,采用混合重复数据删除(Hy-Dedup)机制,通过融合在线和离线两种方式进行有效的数据重删.该方案在线重删阶段根据负载类型对指纹索引进行聚类分组,设置不同重删阈值来评估数据流的空间局部一致性,提高了缓存命中率;离线重删阶段采用延迟敏感的方法,对在线阶段缓存没有命中的重复块进行精确重删.通过这种混合方式在保持系统的I/O性能和吞吐量的前提下,显著减少了写入云存储的重复数据量.实验结果表明,与iDedup机制相比,Hy-Dedup机制可将在线重删率提高35.9％,磁盘空间需求减少41.36％,并且能够在云存储系统中实现高准确率的重删,提升重删效率,节省存储空间.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	邵必林	西安建筑科技大学管理学院	84	498	12.0	18.0
2	贺秦禄	西安建筑科技大学信息与控制工程学院	6	5	1.0	2.0
3	边根庆	西安建筑科技大学信息与控制工程学院	49	283	8.0	15.0
4	贾雷刚	西安建筑科技大学信息与控制工程学院	4	7	2.0	2.0