一个Web抓取器的实现

• 作者: 吕强 杨季文 贡正仙 郭蕾
• 来源期刊: 微机发展
• 学科: 工学
• 关键词: Web抓取器 超文本文档 URL
• 年，卷（期）: 2001,（1）
• 所属期刊栏目: 计算机网络
• 页码范围: 32-35
• 页数: 4页
• 分类号: TP393.07
• 字数: 3142字
• 语种: 中文
• DOI: 10.3969/j.issn.1673-629X.2001.01.013

摘要

本文介绍一个Web抓取器的实现。Web抓取器能够根据用户输入的URL和一定的约束条件自动地搜索Web上的超文本文档，建立URL索引，根据该索引有选择的下载Web资源，同时保持了原有的链接关系。本文实现了一种Web遍历过程，并根据遍历结果抓取文档，从而完成对指定URL抓取文本。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	吕强		134	1011	15.0	26.0
2	杨季文		125	1056	16.0	25.0
3	贡正仙		28	152	6.0	11.0
4	郭蕾		9	18	3.0	4.0