一种基于日志结合分析的集群系统失效预测方法

• 作者: 付晓毓 任睿 孙凝晖 詹剑锋
• 来源期刊: 高技术通讯
• 关键词: 大规模集群系统 系统日志 作业日志 日志分析 失效预测
• 年，卷（期）: 2016,（6）
• 所属期刊栏目: 计算机与通信
• 页码范围: 519-527
• 页数: 9页
• 字数: 7122字
• 语种: 中文
• DOI: 10.3772/j.issn.1002-0470.2016.06.001

摘要

研究了大规模超级计算机群系统的失效预测.针对现有的单一分析系统日志的方法不仅需要复杂的分布式数据挖掘技术,而且失效预测的召回率普遍不高的问题,提出了一种通过将记载集群系统负载变化的作业日志同系统日志结合起来分析来进行失效预测的方法.该方法的原理如下:首先,通过对原始系统日志和作业日志进行预处理和过滤,分别得到细粒度的二维的事件序列和作业序列;然后从中抽取出在系统日志的失效事件发生前作业日志所表现出的三种典型失效征兆;最后,利用失效征兆进行失效预测.在真实的IBM BlueGene/P系统的系统日志和作业日志上的实验结果表明,基于两种日志结合分析的方法能以较高的准确率和召回率实现细粒度的失效预测.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	孙凝晖		69	478	12.0	19.0
3	詹剑锋		29	388	10.0	19.0
5	付晓毓		1	3	1.0	1.0
14	任睿		1	3	1.0	1.0