实时流处理系统Storm的调度优化综述

• 作者: 蔡宇 赵国锋 郭航
• 来源期刊: 计算机应用研究
• 关键词: 流式数据处理 Apache Storm 性能优化 调度
• 年，卷（期）: 2018,（9）
• 所属期刊栏目: 综述评论
• 页码范围: 2567-2573
• 页数: 7页
• 分类号: TP301.6
• 语种: 中文
• DOI: 10.3969/j.issn.1001-3695.2018.09.002

摘要

随着大数据技术的发展,相对于Hadoop等传统的批处理系统,流式处理系统具有更好的实时性特点.在已有的流式处理系统中,Storm系统具有良好的稳定性、高可扩展性以及高容错性等优点,使它在流式数据处理系统中脱颖而出.但是在任务调度方面,Storm系统并没有做过多的考虑,默认采用相对简单的轮询调度法,导致系统在性能上存在瓶颈.近年来针对Storm系统的调度问题,研究提出了各种优化方案.从实时流处理系统Storm的调度优化出发,将这些优化方法分为四类,并详细阐述各类中具有一定代表性的方法,分析其优缺点以及适用的场景.最后,讨论了在日益发展的新环境下,Storm系统的调度优化相关研究未来可能存在的方向.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	赵国锋	重庆邮电大学电子信息与网络研究院	63	882	12.0	28.0
3	蔡宇	重庆邮电大学电子信息与网络研究院	16	20	2.0	4.0
6	郭航	重庆邮电大学电子信息与网络研究院	2	9	1.0	2.0