基于 Poisson过程的 Hadoop集群平均寿命计算方法

• 作者: 张永 李佳宣 郑晓薇
• 来源期刊: 微电子学与计算机
• 关键词: 集群故障 Poisson过程 集群平均寿命
• 年，卷（期）: 2016,（7）
• 页码范围: 150-153,158
• 页数: 5页
• 分类号: TP302
• 语种: 中文

摘要

Hadoop集群在连续长时间执行任务的过程中，集群故障会对集群造成不同程度的冲击与损害，是集群性能下降、系统故障频发的主要原因，更会导致集群平均寿命的大大缩短。为解决此问题，提出了一种基于Poisson过程的Hadoop集群平均寿命预测方法。通过预测计算，及时对集群进行调整优化，使系统性能保持在正常状态。同时在三种不同特征类型的 Hadoop集群的实验中观察集群在任务执行过程中平均寿命的变化。实验结果表明，该方法能有效地判断 Hadoop集群故障发生的频率，预测出集群的平均寿命，对集群性能优劣进行评价并及时对集群性能进行优化。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张永	辽宁师范大学计算机与信息技术学院	48	408	12.0	17.0
2	郑晓薇	辽宁师范大学计算机与信息技术学院	74	499	11.0	18.0
3	李佳宣	辽宁师范大学计算机与信息技术学院	1	1	1.0	1.0