基于多Agent系统的定题爬虫算法

• 作者: 徐照财 程显毅
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: 定题爬虫 主题关键字过滤 语义
• 年，卷（期）: 2008,（16）
• 所属期刊栏目: 人工智能及识别技术
• 页码范围: 204-206
• 页数: 3页
• 分类号: TP301.6
• 字数: 3353字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-3428.2008.16.070

摘要

定题爬虫的研究是定题搜索引擎的关键技术.该文提出一种基于多Agent系统的爬虫算法,采用本题语义主题关键词过滤的方法来抓取与主题相关的网页,利用本体库语义网络实现本体领域中同近义词的过滤.凭借HTML网页标记对关键字识别的不同权重和超链接锚文本对主题相关网页进行预测,通过黑板的通信机制实现多Agent交互.实验结果表明算法在抓取网页的查准率、查全率方面有一定的改善.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	程显毅	江苏大学计算机科学与通信工程学院	75	491	11.0	16.0
2	徐照财	江苏大学计算机科学与通信工程学院	4	13	2.0	3.0