基于Hadoop云平台的水利普查数据挖掘系统的设计和实现

• 作者: 万定生 樊龙 顾昕辰
• 来源期刊: 计算机与数字工程
• 学科: 工学
• 关键词: Hadoop 数据挖掘 关联规则算法 水利普查
• 年，卷（期）: 2014,（5）
• 所属期刊栏目: 系统结构
• 页码范围: 831-834,875
• 页数: 5页
• 分类号: TP391
• 字数: 3438字
• 语种: 中文
• DOI: 10.3969/j.issn1672-9722.2014.05.023

摘要

针对水利普查数据量大、属性维度多等特点,论文通过探讨和分析Hadoop的组成和运行机制,提出了一种基于Hadoop云平台的水利普查数据挖掘系统,介绍了系统的设计思想及架构,详细阐述系统内各个模块的功能作用.该系统利用Hadoop云平台实现了一种改进后的并行关联规则算法,既充分利用了Hadoop平台并行处理数据的能力,又降低了开发所需的成本.通过进行单机对比测试和集群测试,证明了系统具有更好的可用性和较高的挖掘效率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	万定生	河海大学计算机与信息学院	87	634	15.0	20.0
2	樊龙	河海大学计算机与信息学院	3	13	2.0	3.0
3	顾昕辰	河海大学计算机与信息学院	4	31	3.0	4.0