云环境下的时空数据小文件存储策略

• 作者: 徐正全 熊炼 王涛 顾鑫
• 来源期刊: 武汉大学学报（信息科学版）
• 学科: 地球科学
• 关键词: 云存储 小文件 时空数据 特征提取 模板匹配
• 年，卷（期）: 2014,（10）
• 所属期刊栏目: 学术论文
• 页码范围: 1252-1256
• 分类号: P208
• 语种: 中文
• DOI: 10.13203/j.whugis20130072

摘要

云环境下的网络应用中存在着海量的时空数据小文件,针对HDFS处理小文件效率不高的问题,提出了一种结合用户访问规律与数据自身属性的数据处理方案.该方案将用户访问转化为数据请求序列,根据数据的时空属性提取并构建特征序列,通过模板匹配找到用户在不同访问模式下的特征模板,发现模板内文件之间的访问相关性,合并相关文件.实验结果表明,该方案有效地提高了系统对小文件的存储读取效率,减小了网络应用的响应时间.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	徐正全	武汉大学测绘遥感信息工程国家重点实验室	70	534	11.0	19.0
2	王涛	武汉大学测绘遥感信息工程国家重点实验室	111	1332	19.0	34.0
3	顾鑫	武汉大学测绘遥感信息工程国家重点实验室	4	57	3.0	4.0
4	熊炼	武汉大学测绘遥感信息工程国家重点实验室	4	39	3.0	4.0