基于并行计算的海量日志分析系统实现

• 作者: 吴建国 杨静 白超
• 来源期刊: 计算机技术与发展
• 学科: 工学
• 关键词: 分布式计算 分布式文件系统 云计算 日志处理
• 年，卷（期）: 2013,（7）
• 所属期刊栏目: 智能、算法、系统工程
• 页码范围: 80-83
• 页数: 4页
• 分类号: TP31
• 字数: 3335字
• 语种: 中文
• DOI: 10.3969/j.issn.1673-629X.2013.07.020

摘要

通过深入研究日志的类型和特点,设计并实现了一套基于并行计算的海量日志文件分析系统.该系统采用集群方式并行地收集日志文件,采用分布式文件系统存储,最终利用并行计算对日志进行分析处理.该系统实现了日志采集、分析的完全自动化处理,在系统部署之后能够有效地进行系统安全的维护、系统性能的优化、系统故障的排查.该系统结合云计算提高了日志分析的效率,解决了海量日志处理过程中存在的问题,为海量日志分析提供了一个完整有效的解决方案.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	吴建国		68	474	11.0	18.0
2	杨静	解放军电子工程学院计算机系	4	24	3.0	4.0
3	白超		1	11	1.0	1.0