HD-Apriori算法在水利普查数据处理中的应用研究

• 作者: 丁伟 万定生 姚建国 石波
• 来源期刊: 信息技术
• 学科: 工学
• 关键词: 数据挖掘 Map/Reduce Apriori算法 水利普查
• 年，卷（期）: 2018,（6）
• 所属期刊栏目: 基金项目
• 页码范围: 7-11,16
• 页数: 6页
• 分类号: TP311.13
• 字数: 4324字
• 语种: 中文
• DOI: 10.13274/j.cnki.hdzj.2018.06.002

摘要

将传统的关联规则Apriori算法部署到云平台,数据挖掘的效率有很大的提升,但数据类型复杂程度和数据量的不断增加,Apriori算法需频繁扫描事务数据库,产生的频繁项明显增多,耗费大量的系统I/O、内存资源.提出一种基于Map/Reduce编程模型的并行HD-Apriori算法.该算法通过采用0-1矩阵从而达到简化计算并有效减少扫描数据库次数,实现Apriori算法的并行化.实验证明,HD-Apriori算法的挖掘效率优于Apriori算法,且数据规模越大,效果愈显著.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	万定生	河海大学计算机与信息学院	87	634	15.0	20.0
2	丁伟	河海大学计算机与信息学院	18	42	4.0	6.0
3	石波	河海大学计算机与信息学院	1	0	0.0	0.0
4	姚建国		3	1	1.0	1.0