分布式计算环境下的栅格数据存储策略

• 作者: 夏灯城 崔永键 张剑波 李谢清 袁国斌 赵加奥
• 来源期刊: 国防科技大学学报
• 学科: 地球科学
• 关键词: 分布式计算 栅格数据 存储策略 地图代数
• 年，卷（期）: 2017,（6）
• 所属期刊栏目: 航天工程· 计算机科学与技术
• 页码范围: 51-58
• 页数: 8页
• 分类号: TP311|P208
• 字数: 5952字
• 语种: 中文
• DOI: 10.11887/j.cn.201706009

摘要

针对传统的栅格数据存储策略不能满足分布式计算环境下粗粒度数据访问需求,应对海量栅格数据计算时效率低下的问题,结合分布式文件系统的存储特点,同时考虑地图代数算子在Map/Reduce阶段以栅格瓦片为单位的计算特点,提出一种基于Hadoop分布式文件系统的栅格瓦片存储策略.围绕栅格数据瓦片分割、压缩瓦片数据组织与存储、分布式文件输入输出接口改进等方面对该存储策略加以实现,并使用基于该存储策略的地图代数局部算子的分布式计算流程加以验证.理论分析与实验结果表明,该策略能够显著提高分布式计算环境下空间分析算子的运算速度.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张剑波	中国地质大学信息工程学院	22	232	9.0	14.0
2	袁国斌	中国地质大学信息工程学院	12	162	7.0	12.0
3	李谢清	中国地质大学信息工程学院	2	16	2.0	2.0
4	夏灯城	中国地质大学信息工程学院	1	4	1.0	1.0
5	赵加奥	中国地质大学信息工程学院	1	4	1.0	1.0
6	崔永键	中国地质大学信息工程学院	1	4	1.0	1.0