基于Hadoop平台的数据迁移方法研究实现

• 作者: 王铭 田茂 赵鑫 金山城
• 来源期刊: 计算机测量与控制
• 关键词: Hadoop 关系型数据库 HBase 数据迁移
• 年，卷（期）: 2018,（4）
• 所属期刊栏目: 设计与应用
• 页码范围: 225-230
• 页数: 6页
• 分类号: TP274
• 语种: 中文
• DOI: 10.16526/j.cnki.11-4762/tp.2018.04.059

摘要

随着计算机科学的发展和大数据时代的到来,应用系统已经出现了数据海量化、用户访问高量化的局面,使得企业应用系统的原有关系型数据库(RDBMS)面临承担更大负荷的压力,系统的高性能要求得不到有效满足,对于关系型数据库所面临的问题,Ha-doop平台中的HBase数据库可有效解决;以关系型数据库中MySQL数据库及Hadoop平台中分布式数据库HBase数据库为研究基础,应对企业应用数据海量化增长,提出从关系型数据库(MySQL数据库)向分布式数据库(HBase数据库)进行数据迁移的方法,并通过研究HBase数据库存储原理提出从MySQL到HBase的表模式转换原则实现高效数据查询性能的数据迁移方法;最后,将该方法与同类数据迁移工具Sqoop进行比较,证明该方法进行数据迁移的便捷性和在迁移后数据库中进行连接查询的高效性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	田茂	湖北大学计算机与信息工程学院	22	177	7.0	12.0
2	王铭	湖北大学计算机与信息工程学院	2	20	2.0	2.0
3	赵鑫	湖北大学计算机与信息工程学院	1	5	1.0	1.0
4	金山城	湖北大学计算机与信息工程学院	2	8	2.0	2.0