"格网索引+MapReduce"策略下的地理国情统计分析研究

• 作者: 刘仁义 张丰 杜震洪 林雅萍
• 来源期刊: 浙江大学学报（理学版）
• 学科: 地球科学
• 关键词: 地理国情统计分析 地理国情普查数据 格网索引 MapReduce
• 年，卷（期）: 2017,（6）
• 所属期刊栏目: 地球科学
• 页码范围: 660-665
• 页数: 6页
• 分类号: P208
• 字数: 4674字
• 语种: 中文
• DOI: 10.3785/j.issn.1008-9497.2017.06.004

摘要

地理国情统计分析是深度研究地理国情普查数据的首要前提.针对现有单机集中式数据存储与处理方式存在耗时长、效率低甚至不支持的问题,设计了"格网索引+M apReduce"策略,基于规则格网设计普查数据文件的分块组织与分布式存储方式,研制了格网索引与空间分析相结合的双层过滤机制,构建基于M apReduce的地理国情并行统计算法.最后,与无索引MapReduce、ArcGIS平台进行性能对比测试,结果表明:"格网索引+MapReduce"方法的统计效率远高于A rcGIS平台,对无索引M apReduce方法亦有明显的效率优势,研究拟为地理国情普查数据的高性能、多类型、大批量统计分析提供优选方案.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	杜震洪	浙江大学浙江省资源与环境信息系统重点实验室	48	290	10.0	15.0
5	刘仁义	浙江大学浙江省资源与环境信息系统重点实验室	103	1708	24.0	38.0
9	张丰	浙江大学浙江省资源与环境信息系统重点实验室	74	551	13.0	20.0
13	林雅萍	浙江大学浙江省资源与环境信息系统重点实验室	1	2	1.0	1.0