基于Hadoop的校园网站日志系统的设计与实现

• 作者: 姜开达 孙强 章思宇
• 来源期刊: 华东师范大学学报（自然科学版）
• 学科: 工学
• 关键词: 大数据 Hadoop 校园网站 日志系统
• 年，卷（期）: 2015,（z1）
• 所属期刊栏目: 大数据与云计算
• 页码范围: 126-131
• 页数: 6页
• 分类号: TP393.08
• 字数: 4510字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-5641.2015.z1.021

摘要

每所高校校园网内成百上千的网站每天产生的Web访问日志量级都以千万计.利用大数据技术对这些海量、实时的数据进行集中搜集和长期存储,并通过后期大数据分析来挖掘这些日志的价值,无论从管理运维角度,还是从信息安全视角都具有实际意义.本文以上海交通大学为例,介绍了利用Hadoop大数据平台,存储并分析校园网内数千网站日志的系统设计和实现.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	姜开达	上海交通大学网络信息中心	43	116	6.0	8.0
2	章思宇	上海交通大学网络信息中心	15	67	4.0	7.0
3	孙强	上海交通大学网络信息中心	19	141	7.0	11.0