一种高效的大数据实时性解决方案

• 作者: 唐云善 杨志
• 来源期刊: 计算机与数字工程
• 学科: 工学
• 关键词: 大数据 Hadoop 对象化并行计算 对象化并行计算框架
• 年，卷（期）: 2014,（4）
• 所属期刊栏目: 信息处理与网络安全
• 页码范围: 678-684
• 页数: 7页
• 分类号: TP301
• 字数: 5581字
• 语种: 中文
• DOI: 10.3969/j.issn1672-9722.2014.04.033

摘要

大数据计算是物联网和云计算的研究热点之一.针对大数据中的结构化和非结构化数据,Hadoop技术在实时性要求不高的场景中应用效果较好,但在实时性要求高的场景中不能满足需求.针对这一问题,论文利用对象化并行计算提出了一种高效的实时性解决方案.对象化并行计算融合了对象化、Hadoop、内存计算等技术.在方案中,业务数据格式化成对象并分布式存储到集群计算机内存中,任务拆分成子任务通过并行计算来完成.对象化并行计算系统应用在国家电网公司电网资产质量监督管理系统中,应用效果表明该方案可大幅度提升系统性能,满足实时性需求.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	唐云善		11	133	5.0	11.0
2	杨志		4	54	3.0	4.0