基于大数据技术的新闻采集和事件分析系统的设计与实现

• 作者: 王淑丽 马旭
• 来源期刊: 数字技术与应用
• 学科: 工学
• 关键词: 大数据技术 数据采集 事件分析 新闻分析 系统设计
• 年，卷（期）: 2018,（10）
• 所属期刊栏目: 设计开发
• 页码范围: 157-158
• 页数: 2页
• 分类号: TP311
• 字数: 2191字
• 语种: 中文
• DOI: 10.19695/j.cnki.cn12-1369.2018.10.80

摘要

为了解决获取互联网新闻时查找慢、数据杂、阅读效率低的问题,本文提出了一种基于大数据技术的新闻采集和事件分析系统.该系统首先采集互联网新闻数据,运用数据清洗、分布式存储等技术存到数据库;接着对数据进行分析,运用机器学习等技术,进而得到新闻主主题;然后新闻进行聚合,获取到事件主题;最后根据事件主体对所有时间进行展示,实现了对于互联网新闻的采集与事件分析的全过程.该系统提高了获取互联网新闻的效率,并解决了数据杂乱和阅读效率低的问题.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王淑丽	北京信息科技大学计算机学院	3	5	1.0	2.0
2	马旭	北京信息科技大学计算机学院	6	6	1.0	2.0