面向网络新闻的爬虫开发与热点新闻事件分析

• 作者: 刘海砚 陈思雯
• 来源期刊: 测绘与空间地理信息
• 学科: 地球科学
• 关键词: 网络爬虫 网络新闻 事件分析 十九大
• 年，卷（期）: 2019,（3）
• 所属期刊栏目: 基金项目专栏
• 页码范围: 100-103,108
• 页数: 5页
• 分类号: P208
• 字数: 3774字
• 语种: 中文

摘要

Python平台开发了网络新闻爬虫,通过实验对比常用的网页数据获取方法,本文提出一种适合新闻网页的解析方式,克服了获取动态网页时源码不完整、单一方法解析网页效率低下等弊端,满足了新闻网页抓取、解析、结构化和入库存储等需求.并将新浪新闻中心作为网络新闻数据采集的目标,分析发现新浪新闻近几年的发展情况.此外,利用词频统计等手段对十九大会议新闻进行分析,直观地反映了十九大的核心人物、关键党派、热点话题变化等重要信息.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	刘海砚	信息工程大学地理空间信息学院	70	486	11.0	18.0
2	陈思雯	信息工程大学地理空间信息学院	3	1	1.0	1.0