基于Hadoop的日志分析系统的设计与实现

• 作者: 周教生
• 来源期刊: 电脑迷
• 关键词: Hadoop 日志分析系统
• 年，卷（期）: 2017,（21）
• 所属期刊栏目: 软件应用
• 页码范围: 24-25
• 页数: 2页
• 字数: 2864字
• 语种: 中文

摘要

海量的互联网应用产生大量的web日志,从这些海量日志中找出有价值的信息已经成为一种重要的互联网应用.面对海量的web日志,分布式存储和计算成为一种必然的趋势.本文采用了Hadoop的HDFS和Map/Reduce,实现了一个日志分析系统,主要包括互联网日志的收集,存储和处理,通过自定义数据包的配置文件,系统可实现报表的自定义性,通过这种方式不仅减少了工作量,同时提高了工作效率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	周教生	兰州文理学院电子信息工程学院	9	10	2.0	2.0