基于子模式的关系数据到图数据ETL方法研究

• 作者: 丁强龙 张学杰 王津
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 图数据库 分布式存储 ETL(数据提取、转换和加载) 子模式
• 年，卷（期）: 2017,（12）
• 所属期刊栏目: 大数据与云计算
• 页码范围: 76-84
• 页数: 9页
• 分类号: TP311
• 字数: 9240字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.1605-0320

摘要

图数据库在解决多层关系查询、社区发现等问题时性能优于关系数据库.然而目前大量的数据以关系数据的形式存储,如何高效完整地进行关系数据到图数据的ETL,即抽取、转换、加载,是图数据库应用领域研究的重要问题.国内外对该问题有了一些研究,但存在转换后的图数据质量不高、转换效率低、转换结果不利于分布式存储等问题.因此,提出基于子模式的关系数据到图数据ETL方法,改进原有ETL方法的流程和算法.该方法将关系数据库模式拆分为若干个子模式,并行进行ETL.不仅提高了ETL的效率,转换结果能满足图数据的分布式存储要求,也可以作为Spark GraphX计算框架的基础数据.最后,使用Java EE和Neo4j开发了原型系统,并进行了实验验证.结果表明,改进后的ETL方法获得了较已有方法更好的转化性能.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张学杰	云南大学信息学院	40	337	9.0	16.0
2	丁强龙	云南大学信息学院	2	11	2.0	2.0
3	王津	云南大学信息学院	2	14	2.0	2.0