基于混合处理模型的乱序数据流分布式聚合查询处理技术

• 作者: 吕品 李陶深 杨宁 许嘉
• 来源期刊: 广西科学
• 学科: 工学
• 关键词: 乱序数据流 混合处理模型 聚合查询 分布式查询处理
• 年，卷（期）: 2019,（4）
• 所属期刊栏目: 计算科学
• 页码范围: 398-404
• 页数: 7页
• 分类号: TP391
• 字数: 5643字
• 语种: 中文
• DOI: 10.3969/j.issn.1005-9164.2019.04.007

摘要

为了解决现有的乱序数据流聚合查询处理技术不能在降低查询处理延迟,同时保障聚合查询结果的最终正确性的局限性问题,本研究设计了混合嵌入分布式流处理模块和分布式批处理模块的乱序数据流分布式聚合查询处理技术.该技术一方面基于用户给定的结果质量,限制自适应地优化流处理模块所用的缓冲区大小,从而尽可能降低流处理的查询处理延迟;另一方面基于备份于分布式数据存储系统的历史流数据,并以批处理的方式实现对极其晚到流元组的查询处理,从而保障聚合查询结果的最终正确性.基于真实的乱序数据流数据集对该技术进行测试分析表明:该技术在平均查询处理时延、查询结果精度和系统可扩展性方面,比目前最好的基于缓存的乱序数据流处理技术均具有显著优势.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	李陶深	广西大学计算机与电子信息学院	394	2640	25.0	36.0
7	许嘉	广西大学计算机与电子信息学院	14	9	1.0	2.0
9	吕品	广西大学计算机与电子信息学院	13	8	1.0	2.0
18	杨宁	广西大学计算机与电子信息学院	2	1	1.0	1.0