地学大数据处理架构与关键技术研究

• 作者: 康建芳 张耀南 敏玉芳 艾鸣浩
• 来源期刊: 数据与计算发展前沿
• 关键词: 地学大数据 地学数据处理方法 汇聚融合 异构集成
• 年，卷（期）: 2020,（2）
• 所属期刊栏目: 专刊:数据分析技术与应用
• 页码范围: 91-100
• 页数: 10页
• 字数: 6736字
• 语种: 中文
• DOI: 10.11871/jfdc.issn.2096-742X.2020.02.007

摘要

[目的]大数据以其独特的数据科学思维为地学研究知识发现带来重大机遇,但地学数据独特的多源异构、时空关联、多尺度和不确定性等特征亦给地学大数据处理带来一系列挑战.[方法]本文在分析地学数据特点基础上,结合数据关联、中间件系统、微服务及容器等技术手段,提出一种面向地学大数据的处理框架,重点解决地学领域多源数据汇集融合、异构数据综合集成处理问题,并将地学模型引入框架,增强数据处理的地学专业性.[结果]框架及其关键技术已在国家冰川冻土科学数据中心建设、高寒环境联合观测研究云及中巴走廊灾害数据集制备中应用实施.[结论]地学大数据平台处理框架拓宽数据处理维度,可为多主题、多尺度地学研究分析和知识发现提供支撑,未来框架将适应互联网、社交网络、平面媒体等更广泛来源的地学数据处理,进一步融合人工智能技术,提供更智能更迅捷的地学数据处理结果.