基于Spark的大数据三枝决策分类方法

• 作者: 刘牧雷 徐菲菲
• 来源期刊: 上海电力学院学报
• 学科: 工学
• 关键词: 三枝决策 Spark 大数据
• 年，卷（期）: 2018,（5）
• 所属期刊栏目: 计算机科学
• 页码范围: 483-490
• 页数: 8页
• 分类号: TP181
• 字数: 5055字
• 语种: 中文
• DOI: 10.3969/j.issn.1006-4729.2018.05.013

摘要

针对大规模的数据,借助Spark平台的分布式快速处理能力,提出了基于Spark的大数据三枝决策分类方法.该方法基于三枝决策理论,使用Spark对数据进行并行化处理.由经验数据获得数据的决策边界后,通过并行的方式进行正例和反例的判断,从而提高了在大数据集上的决策效率.采用多轮的分步决策方法提高了决策的效率与准确率.通过在UCI公开数据集mushroom和connect-4上的试验结果表明,新方法适用于大数据情况下的决策问题,大大提高了三枝决策分类算法的效率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	徐菲菲	上海电力学院计算机科学与技术学院	15	157	6.0	12.0
2	刘牧雷	上海电力学院计算机科学与技术学院	2	0	0.0	0.0