基于Spark的航空信息服务平台

• 作者: 颜廷龙 李瑛 王凤芹
• 来源期刊: 计算机系统应用
• 关键词: 航空数据 Spark 大数据 数据管理 数据仓库
• 年，卷（期）: 2021,（4）
• 所属期刊栏目: 系统建设|System Construction
• 页码范围: 77-81
• 页数: 5页
• 语种: 中文
• DOI: 10.15888/j.cnki.csa.007847

摘要

针对大数据时代下,海军航空部队存在的种种数据治理问题,设计了一种基于Spark的航空信息服务平台,平台实现了航空数据的存储,分析与挖掘等功能.平台采用4层体系架构,使用了HDFS分布式文件存储框架和Hive数据仓库工具实现了数据的存储和管理.最后,通过仿真实验,比较在不同数据量下航空信息服务平台与传统航空数据仓库的性能优劣.通过海军航空信息服务平台建设,可以有效为海军航空部队实训提供数据支撑,为平台使用者提供辅助决策.