基于主题的多线程网络爬虫系统的研究

• 作者: 宋婷婷
• 来源期刊: 现代信息科技
• 学科: 工学
• 关键词: 多线程 主题 网络爬虫
• 年，卷（期）: 2020,（7）
• 所属期刊栏目: 计算机技术
• 页码范围: 83-85,88
• 页数: 4页
• 分类号: TP391.3
• 字数: 3419字
• 语种: 中文
• DOI: 10.19850/j.cnki.2096-4706.2020.07.027

摘要

网络爬虫是当前较流行的网络搜索引擎工具,其设计需要不断优化,研究也需要不断深入.主题网络爬虫抓取目标明确、抓取结果的结构性较好,更便于进行分析.该文报告了网络爬虫技术的现状,从主题网络爬虫的基本结构入手,对当前主题网络爬虫主流系统的系统功能架构和主要功能模块进行了研究,并分析了当前主流系统的多线程管理模式,特别对基于Java开源框架的爬虫系统的多线程进行分析,为网络爬虫性能的提高提出更进一步的方法.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	宋婷婷		1	0	0.0	0.0