Web Robot技术及其Java实现

• 作者: 刘丽华 谭淑英
• 来源期刊: 中南工业大学学报(自然科学版)
• 学科: 工学
• 关键词: Robot 机器人排斥标准 JAVA多线程 信息搜索
• 年，卷（期）: 2001,（3）
• 所属期刊栏目: 机电与信息工程
• 页码范围: 325-327
• 页数: 3页
• 分类号: TP39
• 字数: 1776字
• 语种: 中文
• DOI: 10.3969/j.issn.1672-7207.2001.03.028

摘要

WWW环球信息呈指数级增长，使WWW成为全球最大的信息系统，研究其中的信息搜索工具具有现实意义．Web Robot是搜索引擎中的核心部分，它从给定的统一资源地址开始分析，递归地搜索新的Web文档．作者论述了Web Robot的工作原理以及机器人排斥标准，用Java实现了Web文档的下载、超链提取、新超链的可用性判断和访问站点的安全性检查，为提高Web Robot的效率提出了2种解决途径，即采用Java多线程处理技术和集群式Robot．此外，给出了用Java多线程处理技术提高效率的算法，对网站建设和信息搜索工具的开发具有一定的参考价值．

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	刘丽华	中南大学信息科学与工程学院	23	135	8.0	11.0
2	谭淑英	中南大学信息科学与工程学院	2	33	2.0	2.0