搜索引擎中网络蜘蛛的研究与实现

• 作者: 毛晓蛟
• 来源期刊: 电脑编程技巧与维护
• 学科: 工学
• 关键词: 搜索引擎 网络蜘蛛 多线程 搜索策略
• 年，卷（期）: 2010,（18）
• 页码范围: 88-90
• 分类号: TP3
• 字数: 2510字
• 语种: 中文
• DOI: 10.3969/j.issn.1006-4052.2010.18.034

摘要

网络蜘蛛程序是搜索引擎工作的基础和关键,实现了抓取网络资源的网络蜘蛛程序,通过入口网址下载网络资源,并对其分析,获得包含的其他链接,利用这些链接向整个网络扩散,下载其他资源.测试了蜘蛛程序抓取网页的能力,并对多线程实现的利弊进行讨论,总结了常用的算法搜索策略,提出了后续的研究方向.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	毛晓蛟	南京师范大学强化培养学院	10	41	4.0	6.0