面向大数据的数据管理平台架构研究与应用

• 作者: 杨鹏 王宝会 马志程
• 来源期刊: 网络新媒体技术
• 关键词: 大数据 并行计算 数据管理平台
• 年，卷（期）: 2015,（4）
• 所属期刊栏目: 网络通讯与计算技术
• 页码范围: 22-27
• 页数: 6页
• 字数: 4737字
• 语种: 中文

摘要

大数据管理对传统的基于关系数据库管理系统和文件管理服务器的处理能力和数据吞吐量提出了挑战,为了更好的利用大数据改进企业统计的科学性和及时性,实现应用系统获取结构化和非结构化数据,更快、更精准的统计,研究开发支持结构化和非结构化数据统一管理的数据管理平台成为一项非常迫切并且重要的任务.针对于大数据的数据管理平台具备存储容量大、存储多种媒体形式的特点,设计了基于Spark平台的并行计算数据管理平台原型S-BDMP和基于S-BDMP的数据服务管理平台的应用方案.大数据管理平台原型S-BDMP可以广泛应用于海量的结构化数据分析和非结构化数据的存储和处理.S-BDMP通过在国网甘肃省电力公司信息通信公司信息系统中的集成测试,使得原有信息系统在海量数据处理中有了很大的性能提升,并很大程度提高了系统吞吐能力.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	马志程		21	96	6.0	9.0
2	杨鹏		18	86	4.0	8.0
3	王宝会	北京航空航天大学软件学院	6	28	4.0	5.0