一种自适应的分布式数据流处理调整技术

• 作者: 周之敏 汪卫 王鹏 马元文
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: 数据流查询 分布式 动态调整 状态管理 调整策略
• 年，卷（期）: 2015,（12）
• 所属期刊栏目: 专栏
• 页码范围: 15-20,25
• 页数: 7页
• 分类号: TP391
• 字数: 6033字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-3428.2015.12.003

摘要

由于数据流速率的不稳定特性,将数据流查询部署在固定数量的结点上会导致分布式数据流管理系统(DDSMS)难以高效地利用计算资源.为此,针对目前支持一个结点运行多个实例模式的DDSMS,提出一种基于操作符组的自适应动态调整技术,包含桶机制的路由管理、生成调整策略和调整执行计划等方法.通过监控当前执行计划的运行状态,DDSMS生成代价较小的调整策略,并对当前执行计划进行调整.在数据流处理的基准测试数据上进行实验,结果表明,该调整技术可以更加细粒度地制定调整策略,灵活应对数据流速率的变化.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王鹏	复旦大学计算机科学技术学院上海市数据科学重点实验室	64	321	10.0	15.0
2	汪卫	复旦大学计算机科学技术学院上海市数据科学重点实验室	100	1152	16.0	29.0
3	马元文	复旦大学计算机科学技术学院上海市数据科学重点实验室	1	6	1.0	1.0
4	周之敏	复旦大学计算机科学技术学院上海市数据科学重点实验室	1	6	1.0	1.0