大数据计算与存储分离技术实验分析

• 作者: 吴金坛 李树楠 章超
• 来源期刊: 电脑知识与技术:学术版
• 学科: 工学
• 关键词: 大数据 计算与存储分离 Ceph
• 年，卷（期）: 2020,（27）
• 页码范围: 24-27
• 页数: 4页
• 分类号: TP31

摘要

随着大数据的发展,传统的集群混合部署模式逐渐暴露出管理难、资源竞争、性能相互制约等问题。计算与存储分离部署方案不断发展,开始呈现其优势,但是在解决计算与存储资源弹性扩展、高容错和高可靠问题上,且具备兼顾虚拟机和容器两种部署方式的能力要求上,目前的方案都相形见绌。基于此,提出并实现了一种基于Ceph的大数据平台分离存储方案,解耦了计算与存储之间的绑定关系,同时实现了资源的弹性利用,并兼容了虚拟机和容器的两种大数据部署方式。最后我们搭建了试验环境对方案的功能及性能进行了测试,对上述能力进行了验证。