基于MongoDB的BESIII分布式计算记账系统的研究与实现

• 作者: 孙涌 张刚 张晓梅 李卫东 邓子艳
• 来源期刊: 计算机应用与软件
• 学科: 工学
• 关键词: 记账系统 MongoDB 分布式计算 数据压缩 高能物理
• 年，卷（期）: 2015,（9）
• 所属期刊栏目: 应用技术与研究
• 页码范围: 62-67
• 页数: 6页
• 分类号: TP3
• 字数: 6252字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-386x.2015.09.015

摘要

北京谱仪III（BESIII）高能物理实验要对海量的数据进行处理与分析。为了应对海量数据对计算资源提出的挑战， BESIII实验基于分布式架构软件DIRAC构建了统一的分布式计算平台。针对实验具体需求，对BESIII分布式计算的记账系统进行研究，以MongoDB作为系统底层存储数据库，采用复合片键以及副本集策略，提高系统可扩展性与可用性；提出基于动态时间窗口的数据压缩算法，实现了统计查询结果的实时响应；基于Map／Reduce、Matplotlib提高分析速度以及实现分析结果的多样化展示。目前该系统已被用于计算平台信息的收集和分析。测试表明基于MongoDB 的记账系统表现出了良好的性能，能够满足实验的需要。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	孙涌	苏州大学计算机科学与技术学院	103	636	14.0	20.0
2	张刚	苏州大学计算机科学与技术学院	4	16	3.0	4.0
3	邓子艳	中国科学院高能物理研究所	4	22	3.0	4.0
4	李卫东	中国科学院高能物理研究所	20	228	6.0	15.0
5	张晓梅	中国科学院高能物理研究所	37	99	6.0	8.0