基于新闻网页主题要素的网页去重方法研究

• 作者: 刘睿 张彦 张永奎 王鹏
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 新闻主题要素 模糊匹配 去重算法
• 年，卷（期）: 2007,（28）
• 所属期刊栏目: 数据库与信息处理
• 页码范围: 177-180
• 页数: 4页
• 分类号: TP391
• 字数: 5131字
• 语种: 中文
• DOI: 10.3321/j.issn:1002-8331.2007.28.054

摘要

网页检索结果中,用户经常会得到内容相同的冗余页面.提出了一种通过新闻主题要素学习新闻内容的新闻网页去重算法.该方法的基本思想是:首先,抽取新闻要素中关于事件发生的时间和地点短语;然后,通过抽取的时间和地点短语抽取新闻的内容;最终,根据学习的新闻内容通过计算它们的相似度来判断新闻网页的重复度.实验结果表明,该方法能够完成针对新闻内容的新闻网页的去重,并得到较高的查全率和查准率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王鹏	山西大学计算机与信息技术学院	11	43	3.0	6.0
2	张彦	山西大学计算机与信息技术学院	19	135	6.0	11.0
3	张永奎		6	62	4.0	6.0
4	刘睿		2	28	2.0	2.0