云计算环境下海量数据分析系统的设计

• 作者: 苏亚妮 苏曦 霍米会
• 来源期刊: 新技术新工艺
• 学科: 工学
• 关键词: 海量数据分析 云计算环境 分布式计算 并行处理 系统设计
• 年，卷（期）: 2015,（9）
• 页码范围: 39-43
• 页数: 5页
• 分类号: TP311.5
• 字数: 3061字
• 语种: 中文

摘要

针对传统计算环境中海量数据存储、分析处理效率、实时性、完整性和数据维护费用等难题,利用云计算环境的超大规模、虚拟化、经济和安全可靠等特点,进行海量数据分析。基于分布式计算架构Hadoop,利用并行计算框架 Map/Reduce,构建了典型的云计算环境,并采用数据仓库分析平台 Hive,实现了高效、实用的海量数据分析系统的设计。以系统总体框架设计为基础,从客户端分析、接收服务器、后端数据分析和数据可视化等模块完成了系统设计,对海量数据分析处理系统设计具有一定参考价值。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	苏曦		5	17	2.0	4.0
2	苏亚妮		12	73	5.0	8.0
3	霍米会		2	1	1.0	1.0