一种基于MongoDB和Hadoop的海量非结构 化物联网数据处理方案

• 作者: 杨鹏 林俊晖
• 来源期刊: 微电子学与计算机
• 关键词: 物联网 大数据 NoSQL Hadoop平台 MongoDB数据库
• 年，卷（期）: 2018,（4）
• 页码范围: 68-72,78
• 页数: 6页
• 分类号: TP391
• 语种: 中文

摘要

随着物联网数据种类的增多和数据规模的增大,对物联网数据的存储和计算提出了新的挑战,为了应对海量非结构化物联网数据的存储和计算要求,提出了一种NoSQL数据库技术与MapReduce编程框架相结合的方案.使用典型的NoSQL数据库MongoDB作为主数据库来存储海量非结构化的物联网数据,使用Hadoop MapRe-duce作为对物联网数据分析处理的计算框架.通过对MongoDB集群和Hadoop集群的重叠部署,降低了计算时数据传输的开销,构建了一套高可用、高性能的物联网大数据处理平台.通过使用该方案对海量非结构化物联网数据的处理分析实验验证了该方案的高可用性及高效性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	杨鹏	重庆邮电大学通信与信息工程学院	7	38	2.0	6.0
5	林俊晖	重庆邮电大学通信与信息工程学院	1	9	1.0	1.0