基于Hadoop的在线网络日志分析系统研究

• 作者: 刘会超 杨锋英
• 来源期刊: 计算机应用与软件
• 学科: 工学
• 关键词: 网络安全 日志分析 Hadoop 文件分级归档 在线系统
• 年，卷（期）: 2014,（8）
• 所属期刊栏目: 安全技术
• 页码范围: 311-316
• 页数: 6页
• 分类号: TP311.1
• 字数: 5936字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-386x.2014.08.079

摘要

网络日志分析对网络安全管理具有重要意义,但现有的网络日志分析系统具有无法处理海量日志数据、采用离线模式、处理时延较长等弊端.因此,提出网络日志数据的分级归档机制,实现海量数据的分级优化存储功能.通过将传统的网络日志分析模式和基于Hadoop的离线处理模式相结合,设计基于Hadoop的在线网络日志分析系统,并深入分析系统的功能架构和业务处理流程.实验结果表明:该系统具有良好的可扩展性,可以有效存储处理海量日志数据,具有较快的请求响应速度,并能够满足在线处理的要求.从而验证了系统设计的可行性和有效性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	杨锋英	黄淮学院信息工程学院	22	96	5.0	9.0
2	刘会超	黄淮学院网络信息管理中心	19	103	6.0	9.0