DFMapper:基于查询树的SQL-to-HiveQL自动翻译工具

• 作者: 张成博 杨定裕 范贵生 虞慧群 郭健美
• 来源期刊: 华东理工大学学报（自然科学版）
• 学科: 工学
• 关键词: HiveQL 应用迁移 查询重写 查询树
• 年，卷（期）: 2019,（1）
• 所属期刊栏目: 计算机科学
• 页码范围: 148-155
• 页数: 8页
• 分类号: TP391
• 字数: 4203字
• 语种: 中文
• DOI: 10.14135/j.cnki.1006-3080.20171126002

摘要

Hive作为建立在Hadoop上的数据仓库,已成为很多企业处理大数据的首选.然而,传统企业中大量的遗留应用依赖于传统关系型数据库(RDBMS),迁移时需要翻译大量查询语句.提出了一种基于查询树的SQL到HiveQL的自动翻译方法.该方法利用SQL解析器将SQL语句解析为查询树,提供8种不同的重写策略重构查询树,进而将其转化为正确的HiveQL语句,实现了一个翻译工具——DFMapper.在基准测试集TPC-DS上进行的查询实验证明,DFMapper可以正确翻译绝大多数的查询语句,并且具有很强的扩展性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	虞慧群	华东理工大学计算机科学与工程系	113	814	14.0	24.0
2	范贵生	华东理工大学计算机科学与工程系	47	341	10.0	17.0
3	张成博	华东理工大学计算机科学与工程系	1	1	1.0	1.0
4	杨定裕		2	1	1.0	1.0