基于云计算的大数据挖掘平台

• 作者: 何清 庄福振
• 来源期刊: 中兴通讯技术
• 学科: 工学
• 关键词: 云计算 分布式并行数据挖掘 海量数据
• 年，卷（期）: 2013,（4）
• 所属期刊栏目: 专题:大数据技术与应用
• 页码范围: 32-38
• 页数: 7页
• 分类号: TN915.03|TP393.03
• 字数: 5686字
• 语种: 中文
• DOI: 10.3969/j.issn.1009-6868.2013.04.006

摘要

开发了一个基于云计算的并行分布式大数据挖掘平台——PDMiner.PDMiner实现了各种并行数据挖掘算法,如数据预处理、关联规则分析以及分类、聚类等算法.实验结果表明,并行分布式数据挖掘平台PDMiner中实现的并行算法,能够处理大规模数据集,达到太字节级;具有很好的加速比性能;实现的并行算法可以在商用机器构建的并行平台上稳定运行,整合了已有的计算资源,提高了计算资源的利用效率;可以有效地应用到实际海量数据挖掘中.在PDMiner中还开发了工作流子系统,提供友好统一的接口界面方便用户定义数据挖掘任务.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	何清	中国科学院计算技术研究所智能信息处理重点实验室	30	782	13.0	27.0
2	庄福振	中国科学院计算技术研究所智能信息处理重点实验室	9	87	5.0	9.0