Rabin指纹去重算法在搜索引擎中的应用

• 作者: 贺建英
• 来源期刊: 计算机系统应用
• 关键词: Rabin指纹方法 搜索引擎 去重 URL 海量数据
• 年，卷（期）: 2015,（7）
• 页码范围: 128-131
• 页数: 4页
• 字数: 3192字
• 语种: 中文

摘要

针对搜索引擎在海量数据中搜索速度慢，占用存储空间大，对重复的网页去重性差的现状，提出一种基于Rabin指纹算法的去重方法，不仅对搜索到的URL地址进行去重，还对非重复URL地址对应的网页内容进行相似和相同的去重，试验表明能有效地提高搜索速度、节省存储空间，增强搜索的精度。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	贺建英	四川文理学院计算机学院	35	93	6.0	8.0