大规模异构计算集群的双层作业调度系统

• 作者: 姜晓巍 孙功星 孙震宇 杜然 石京燕 谭宏楠 邹佳恒
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: 计算集群管理 作业调度器 高通量计算 高性能计算 高能物理计算
• 年，卷（期）: 2020,（1）
• 所属期刊栏目: 体系结构与软件技术
• 页码范围: 187-195
• 页数: 9页
• 分类号: TP319
• 字数: 8430字
• 语种: 中文
• DOI: 10.19678/j.issn.1000-3428.0053582

摘要

高能物理计算平台中的 HTCondor 和 SLURM计算集群为多个高能物理实验提供数据处理服务,然而HTCondor并行作业调度效率较低、SLURM难以应对大量串行作业,且计算平台整体资源管理及调度策略过于简单.为满足高能物理计算集群高负荷运行的需求,在传统作业调度器上增加作业管理层,设计双层作业调度系统,通过高效调度串并行作业并兼顾实验组间资源的使用公平性,实现用户对作业的细粒度管理.测试结果表明,双层作业调度系统支持大批量高能物理作业的快速提交,并充分利用计算平台的总体资源,具有较好的作业调度性能.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	石京燕	中国科学院高能物理研究所	17	84	6.0	8.0
2	孙功星	中国科学院高能物理研究所	42	177	8.0	10.0
3	孙震宇	中国科学院高能物理研究所	7	23	3.0	4.0
7	杜然	中国科学院高能物理研究所	11	55	5.0	7.0
8	姜晓巍	中国科学院高能物理研究所	4	24	2.0	4.0
9	邹佳恒	中国科学院高能物理研究所	4	10	1.0	3.0
10	谭宏楠	中国科学院高能物理研究所	2	0	0.0	0.0