基于Slurm的深度学习高性能计算平台设计及其调度实现技术

• 作者: 刘芳 王彦棡 王珏 胡腾腾 陆忠华
• 来源期刊: 科研信息化技术与应用
• 关键词: HPC 深度学习 Slurm
• 年，卷（期）: 2018,（2）
• 所属期刊栏目: 技术
• 页码范围: 40-45
• 页数: 6页
• 字数: 3737字
• 语种: 中文
• DOI: 10.11871/j.issn.1674-9480.2018.02.005

摘要

传统上,HPC与解决大规模科学计算和相应大数据紧密结合.伴随着物联网、移动互联网时代的到来,数据呈现出前所未有的爆炸式的增长,给人类对数据的利用方式提出了新的命题与挑战.2012年,Hinton采用深度学习的方法以巨大的优势摘取ImageNet的桂冠,让人类看到了海量数据与人工智能相结合的巨大价值.HPC系统天然与深度学习无缝对接,本文将以高性能计算集群为基础,提供搭建一整套高性能的深度学习平台设计思路与实现,并以Slurm调度分布式TensorFlow进行海量数据的相关的测试实验.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	刘芳	中国科学院计算机网络信息中心	121	906	16.0	24.0
2	王珏	中国科学院计算机网络信息中心	140	3295	27.0	54.0
3	陆忠华	中国科学院计算机网络信息中心	55	174	7.0	11.0
4	王彦棡	中国科学院计算机网络信息中心	13	15	2.0	3.0
5	胡腾腾	中国科学院计算机网络信息中心	1	3	1.0	1.0