基于Hadoop的海洋位置大数据平台架构设计

• 作者: 包磊 彭庆喜
• 来源期刊: 舰船电子工程
• 学科: 工学
• 关键词: 大数据 海洋位置数据 空间Hadoop 空间索引
• 年，卷（期）: 2019,（11）
• 所属期刊栏目: 计算机与网络安全
• 页码范围: 115-118,198
• 页数: 5页
• 分类号: TP311.13
• 字数: 2685字
• 语种: 中文
• DOI: 10.3969/j.issn.1672-9730.2019.11.029

摘要

海洋位置大数据类型多样、变化高速、规模海量且数据价值密度低,如何建立海洋位置大数据的高效存储、计算与分析平台是一个亟需研究的问题.论文设计了基于Hadoop的海洋位置大数据架构,从数据类型层、存储层、计算层和基本操作层对其进行了拓展.其中存储层在HDFS的基础上插入了两级空间索引结构,支持R-tree等空间索引;计算层基于MapReduce框架增加了两个新组件,支持基于空间索引的并行计算.基于平台可以提供对大型海洋位置数据集的基本的空间分析操作,以此作为后台数据处理引擎可对统计和时空数据挖掘应用提供有效的数据支持.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	彭庆喜	武汉东湖学院计算机科学学院	10	19	3.0	3.0
2	包磊	武汉东湖学院计算机科学学院	2	0	0.0	0.0