一种面向Hadoop中间数据存储的混合存储系统

• 作者: 赵南雨 陈莉君
• 来源期刊: 信息技术
• 学科: 工学
• 关键词: Hadoop 设备同层混合存储 中间数据存储
• 年，卷（期）: 2017,（11）
• 所属期刊栏目: 应用技术
• 页码范围: 161-166
• 页数: 6页
• 分类号: TP333
• 字数: 3692字
• 语种: 中文
• DOI: 10.13274/j.cnki.hdzj.2017.11.039

摘要

针对Hadoop的Reduce阶段的I/O性能瓶颈,设计了针对Hadoop中间数据存储的设备同层混合存储系统.该系统包含数据映射和数据迁移两大模块,其中数据映射模块主要负责I/O请求重定向及维护元数据,数据迁移模块利用闲时进行数据迁移,提高SSD的利用率.实验结果表明,该混合存储系统能够缓解Hadoop的Reduce阶段的I/O瓶颈并提升该阶段的整体性能.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	陈莉君	西安邮电大学计算机学院	47	237	8.0	12.0
2	赵南雨	西安邮电大学计算机学院	1	3	1.0	1.0