多区域大规模迭代计算框架应用研究

• 作者: 卢福军 殷颖 王晓斌 闫萌 马忠义
• 来源期刊: 信息通信技术
• 关键词: 迭代计算 多区域 大规模 迭代计算框架 大数据 Spark
• 年，卷（期）: 2018,（5）
• 所属期刊栏目: 技术广角
• 页码范围: 62-67
• 页数: 6页
• 字数: 3275字
• 语种: 中文
• DOI: 10.3969/j.issn.1674-1285.2018.05.010

摘要

大数据环境下迭代计算是近年来的研究热点.文章基于大数据环境中的数据分散性、数据分区存储性、全集-局部数据分析的相对性等特点,提出基于Spark的多区域大规模的迭代计算框架,并给出多区域迭代计算框架和原生Spark框架的性能对比.该框架能够对广分布的大数据分区多级进行迭代分析,优化算法的执行过程,缩短算法的执行时间,可以很好地适用于中国联通多层级组织机构对通信数据分析的需求,对于迭代算法的运行框架优化具有积极的指导和实践意义.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王晓斌		2	0	0.0	0.0
2	卢福军		2	0	0.0	0.0
3	马忠义	东北大学软件学院	3	4	1.0	2.0
4	殷颖		1	0	0.0	0.0