网络舆情分析中智能爬虫的设计

• 作者: 周民 王华彬 邱雅
• 来源期刊: 电脑知识与技术：学术交流
• 学科: 工学
• 关键词: 网络舆情 网络爬虫 网络资源 爬虫测速 主题更改
• 年，卷（期）: 2011,（11X）
• 页码范围: 8301-8302
• 页数: 2页
• 分类号: TP393.09

摘要

网络爬虫作为舆情分析系统的信息源收集器,其性能的优良直接关系到舆情分析结果的好坏。该文针对舆情分析要求信息源具有较高的主题覆盖率的要求,同时考虑到现有爬虫在有效利用网络资源方面的薄弱现状,在现有爬虫的基础上加入了爬虫测速模块、主题更改模块,为提高爬虫在舆情信息收集中的性能提出了一些解决方法。