MapReduce计算模型在MODIS数据并行处理系统中的应用研究

• 作者: 周纯喜 张春华 李红林 胡磊 饶若愚
• 来源期刊: 计算机应用与软件
• 学科: 工学
• 关键词: MapReduce MODIS Hadoop 并行处理
• 年，卷（期）: 2013,（7）
• 所属期刊栏目: 应用技术与研究
• 页码范围: 262-264,289
• 页数: 4页
• 分类号: TP311
• 字数: 3758字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-386x.2013.07.069

摘要

讨论了传统MODIS数据处理方法中的局限性,提出使用MapReduce计算模型来进行MODIS数据的多节点并行处理的方法,并基于Hadoop系统进行具体实现.该方法把数据处理逻辑和数据存储作为统一的整体部署在各个计算节点上,减少了存储节点到运算节点的数据同步时间,提高了处理效率.对基于时间序列和地理空间分布的方式划分的MODIS数据,有着普遍的适用性.