水利自动化实时流式大数据的处理研究

• 作者: 史惠存 彭大为
• 来源期刊: 江西科学
• 关键词: 实时流式大数据 云计算 分布式集群 Rocket MQ Spark Streaming
• 年，卷（期）: 2020,（2）
• 所属期刊栏目: 信息科学
• 页码范围: 252-256
• 页数: 5页
• 分类号: TP311.13
• 语种: 中文
• DOI: 10.13990/j.issn1001-3679.2020.02.022

摘要

随着计算机技术的不断发展,数据处理技术不断推陈出新,特别是大数据、分布式集群、云计算技术的发展使得数字水利开始向智慧水利转变.由数字水利向智慧水利转变的重要技术之一就是对水利大数据的处理,大数据处理是实现智慧的核心技术.一个完整的大数据处理工作流程大致包括数据收集与导入、数据清洗与质量控制、数据管理与存储、数据分析与可视化、数据建模与模型管理.主要对水利自动化实时流式大数据的处理提出了一种解决方法,该方法能够实现对水利自动化设备实时上报的高频流式大数据进行有效的处理.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	史惠存		2	0	0.0	0.0
2	彭大为		3	1	1.0	1.0