矢量瓦片并行构建与分布式存储模型研究

• 作者: 景维鹏 聂沛 陈广胜
• 来源期刊: 地球信息科学学报
• 关键词: 矢量瓦片 web地图服务 并行处理 Spark 分布式存储 Alluxio
• 年，卷（期）: 2020,（7）
• 所属期刊栏目: 地球信息科学理论与方法
• 页码范围: 1487-1496
• 页数: 10页
• 语种: 中文

摘要

矢量瓦片体积小、生成效率高、支持动态交互,较传统栅格瓦片有诸多优势,是下一代互联网地图服务研究的重点.为了解决当前矢量瓦片研究中处理速度慢,扩展性差等问题,本文利用并行计算框架Spark进行矢量瓦片快速构建,通过自定义转换函数,将原始矢量数据GeoJson转换成mvt瓦片集;对于生成的矢量瓦片集,本文基于分布式内存文件系统Alluxio设计一个瓦片存储模型-VectorTileStore,模型以键值对进行数据存储,瓦片元数据占据前八个键值对,单个瓦片占据一个键值对,在数据写入的同时,基于键构建一个哈希索引,用于快速访问,模型兼容海量瓦片的组织存储,具有很强的扩展性.通过实验结果表明,本文提出的矢量瓦片并行构建算法较单机构建算法运行时间平均减少49.6％,分布式存储模型VectorTileStore较传统方案更适合海量矢量瓦片存储,存取时间效率更高.