一种基于网页指纹的网页查重技术研究

• 作者: 王希杰
• 来源期刊: 计算机仿真
• 学科: 工学
• 关键词: 网页查重 关键词 网页指纹
• 年，卷（期）: 2011,（9）
• 所属期刊栏目: 网络与互连技术
• 页码范围: 154-157
• 分类号: TP3.391.9
• 字数: 4463字
• 语种: 中文
• DOI: 10.3969/j.issn.1006-9348.2011.09.039

摘要

研究网页查重问题.针对传统的SCAM网页查重算法根据比较几个关键词网页中出现次数来判断网页是否重复,当网站中存在相似网页时,由于其关键词非常相近,导致出现误判,造成查重准确率不高的问题.本文提出一种网页指纹查重算法,通过采用信息检索技术,提取出待检测网页的网页指纹,然后通过与网页库中的网页指纹比较判决,完成网页的查重,避免了传统方法只依靠几个关键词而造成的查重准确率不高的问题.实验证明,这种利用网页指纹查重的方法能准确判断网页是否重复,提高了网页信息的准确性,取得了满意的结果.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王希杰		29	180	7.0	12.0