基于流式计算框架的实时数据库分区系统

• 作者: 康宏 袁晓洁 郭蒙雨
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: 数据库分区 流式计算框架 大数据管理 分布式存储 动态负载
• 年，卷（期）: 2017,（11）
• 所属期刊栏目: 先进计算与数据处理
• 页码范围: 8-15
• 页数: 8页
• 分类号: TP39
• 字数: 7318字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-3428.2017.11.002

摘要

为实现大数据环境下大规模动态分区信息的高效处理,结合流式计算框架,提出一种实时数据库分区系统.采用大数据环境下的流式计算技术处理大规模动态的工作负载,设计实时数据分区算法实现数据分区的自动与即时生成,并利用流式计算框架的水平扩展机制提高系统扩展性和吞吐量.实验结果表明,该系统可在大数据环境下实现高效、实时的数据库分区,与传统分区算法相比,具有更高的分区质量和更少的分区时间.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	袁晓洁	南开大学计算机与控制工程学院	37	343	12.0	16.0
2	康宏	南开大学计算机与控制工程学院	5	24	3.0	4.0
3	郭蒙雨	南开大学计算机与控制工程学院	2	6	1.0	2.0