基于云计算的数据挖掘系统设计

• 作者: 蓝机满
• 来源期刊: 电子科技
• 学科: 工学
• 关键词: 云计算 数据挖掘 Spark C4.5算法 K-medoids聚类算法
• 年，卷（期）: 2019,（8）
• 页码范围: 70-74
• 页数: 5页
• 分类号: TN99|TP399
• 字数: 3099字
• 语种: 中文
• DOI: 10.16180/j.cnki.issn1007-7820.2019.08.015

摘要

为了高效、快速地解决呈指数增长的数据处理问题,提高数据储存、运算能力,文中提出了基于云计算的数据挖掘系统的设计.该系统首先分析了主流云计算平台Spark的组件构成和运行机制,深入研究其计算架构的编程原理.同时利用Spark进行了C4.5算法和K-medoids聚类算法的并行化设计,有效提高算法的运行速度、收敛速度和结果的稳定性.测试表明,在进行海量数据的分析处理时,文中提出的云计算平台在分类误差内,可有效提高整体系统的运算速度,分类效率也大幅提高.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	蓝机满		6	15	2.0	3.0