基于Apache Flink的RDF流数据查询

• 作者: 冯嘉美 刘梦赤 郑滔
• 来源期刊: 计算机与现代化
• 学科: 工学
• 关键词: RDF流 并行处理 逻辑操作符 多流连接 Apache Flink
• 年，卷（期）: 2020,（11）
• 所属期刊栏目: 数据库与数据挖掘
• 页码范围: 47-55
• 页数: 9页
• 分类号: TP311
• 语种: 中文
• DOI: 10.3969/j.issn.1006-2475.2020.11.008

摘要

目前成熟的RDF流处理(RDF Stream Processing,RSP)系统由于集中式的设计而缺乏并行处理特性,因此在查询处理大量传入的RDF流数据时,均无法实现高吞吐和低延迟.为提高查询性能,本文对RSP查询过程和Flink流计算结构进行研究,设计数据源、滤器、多路分区连接和投影4个逻辑操作符,并设计一种多流连接(Multi-Stream Join,MSJ)算法用于生成具有并行性的有向无环图的逻辑查询计划,最后以大数据流处理平台Apache Flink为底层实现逻辑操作符和逻辑查询计划.使用真实数据集SRBench和模拟数据集LUBMs进行实验验证.结果表明,与最成熟的系统C-SPARQL、CQELS相比,单机吞吐量增长高达10倍,5台机器集群的吞吐量增长高达28倍,同时在延时方面达到了毫秒级;在查询性能方面实现了处理大量RDF流数据时吞吐量的提高和延时的降低.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	郑滔		3	0	0.0	0.0
2	刘梦赤		1	0	0.0	0.0
3	冯嘉美		1	0	0.0	0.0