基于云存储的重复数据删除架构的研究与设计

• 作者: 宋雨 易璐 王凤霞
• 来源期刊: 计算机系统应用
• 关键词: 重复数据删除技术 云存储 hash值 HDFS HBase
• 年，卷（期）: 2013,（1）
• 页码范围: 208-211
• 字数: 3553字
• 语种: 中文

摘要

随着云计算的发展,云存储技术通过集群应用、虚拟化技术、分布式文件系统等功能将网络中大量各种不同类型的存储设备集合起来协同工作,缓解了老式数据中心的存储压力.另外,重复数据删除技术是一种缩减存储空间减少网络传输量的技术,随着云的广泛应用也势必会发展应用于云存储中.这两种技术结合将会给 IT存储业带来实际效益.本文通过研究重复数据删除技术、云存储技术,设计了基于云存储的重复数据删除架构,提出了一种用 In-line 方式在客户端进行数据块级与字节级相结合的重复数据删除操作后再将数据存入云中的方案.在本架构下,海量数据存储在HDFS中;而文件数据块的哈希值存储在HBase中.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	宋雨	华北电力大学控制与计算机工程学院	91	893	17.0	24.0
2	易璐	华北电力大学控制与计算机工程学院	1	9	1.0	1.0
3	王凤霞	华北电力大学控制与计算机工程学院	1	9	1.0	1.0