定题搜索引擎的设计与实现

• 作者: 段红梅 蔡松 薛建春
• 来源期刊: 科技与创新
• 关键词: 网络爬虫 信息采集 搜索策略
• 年，卷（期）: 2007,（21）
• 所属期刊栏目: 网络与通信
• 页码范围: 145-147
• 页数: 3页
• 分类号: TP311
• 语种: 中文
• DOI: 10.3969/j.issn.1008-0570.2007.21.059

摘要

大量的网页资源和网页的动态特性突出了基于网页信息搜索系统的不断支持和升级的要求.搜索引擎系统中的爬行虫就是为搜集网页中的信息而设计的.爬行虫通过网页中的超链接方便了某个特殊网页快照的自动下载.讨论的根本是与爬行虫的内部架构发展相关.论文首先分析Web信息采集系统模型和爬行虫的搜索策略,给出一个适合中小型网站网页具体信息获取的爬行虫算法,并使用C++ Builder工具实现程序.本文也给出了一些与主题搜索相关的程序说明.