基于Hadoop架构的海量工程数据存储与计算平台构建

• 作者: 兰溯源
• 来源期刊: 现代科学仪器
• 学科: 经济
• 关键词: Hadoop架构 MapReduce并行优化 PSO蚁群算法
• 年，卷（期）: 2018,（5）
• 所属期刊栏目: 仪器研制与开发
• 页码范围: 17-20,28
• 页数: 5页
• 分类号: F062.5
• 字数: 3186字
• 语种: 中文

摘要

针对当前海量的工程数据信息,如何对这些数据进行存储,是当前思考的重点.论文提出利用Hadoop在存储和计算方面的优势,构建一个可用于对多个工程数据信息进行海量存储和管理的平台.利用Hadoop对存储平台进行搭建,并重点对系统功能、内部模块运行逻辑,以及客户端与服务器端数据同步等问题进行详细的设计,同时创新地提出对MapReduce并行参数进行优化,引入PSO蚁群算法,从而大大提高了存储平台作业的效率,为海量数据的处理提供了新的借鉴,可促进工程数据的共享与后续的深入分析.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	兰溯源	延安大学建筑工程学院	2	3	1.0	1.0