一种数据本地化存储与处理系统

• 作者: 孙功星 徐永士 霍菁
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 作业批处理系统(PBS) 高能物理数据分析 文件元数据管理 数据存储本地化
• 年，卷（期）: 2012,（5）
• 所属期刊栏目: 博士论坛
• 页码范围: 7-11
• 分类号: TP393
• 字数: 5382字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.2012.05.003

摘要

简述了当前大型数据中心普遍采用的计算节点集群与存储系统模块化设计的系统结构,说明了部署在各模块上的主要集群系统.分析了具有独立性的结构化数据本地化存储于计算节点的可能性,给出了系统基本框架,从总体拥有成本(TCO)的角度分析了其价值.结合高能物理研究的原始数据特点,认为数据本地化存储在节点上,有利于提高整体利用率,指出了关键部件——文件元数据管理系统的设计要点,分析了PBS作业批处理系统集成文件元数据管理系统的三种方案,给出第一种方案的详细设计,相应的用户提交作业方式的改变.在测试环境下,初步部署了文件元数据管理系统,测试了三种集成方案,给出了简要的分析比较.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	孙功星	中国科学院高能物理研究所计算中心	42	177	8.0	10.0
2	徐永士	中国科学院高能物理研究所计算中心	2	12	2.0	2.0
6	霍菁	中国科学院高能物理研究所计算中心	5	26	3.0	5.0