水利云下的数据清洗策略研究与实现

• 作者: 冯军军 王海沛 贾如春
• 来源期刊: 软件
• 学科: 工学
• 关键词: 水利云 云数据中心 脏数据 数据清洗
• 年，卷（期）: 2016,（10）
• 所属期刊栏目: 设计研究与应用
• 页码范围: 89-93
• 页数: 5页
• 分类号: TP393
• 字数: 4260字
• 语种: 中文
• DOI: 10.3969/j.issn.1003-6970.2016.10.020

摘要

随着水利信息化系统迁入云端之后，由设备或人为、环境等各种主客观原因造成采集到云数据中心的数据中含有大量的“脏数据”（如乱序、异常、相似重复、误报、不完整、逻辑错误等），这些大量的“脏数据”会给应用系统带来高额的处理费用，延长响应时间，甚至会导致数据分析异常，降低决策支持系统的准确率，严重影响系统服务质量，难以支撑上层应用。本文结合项目中的实际情况给出了清洗这些脏数据的流程和方法，并通过实际数据和实验方案验证了本数据清洗方案的有效性，大大改善了水利信息化系统预测预警的效率。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	冯军军		19	12	2.0	2.0
2	贾如春		27	28	2.0	4.0
3	王海沛		6	6	1.0	2.0