信息检索中一种基于词语-主题词相关度的语言模型

• 作者: 李海华 杜小勇 田萱
• 来源期刊: 中文信息学报
• 学科: 工学
• 关键词: 计算机应用 中文信息处理 语言模型 主题词 词语-主题词相关关系 词语-文档-主题词归属关系 词语-主题词共现关系
• 年，卷（期）: 2007,（6）
• 页码范围: 43-51
• 页数: 9页
• 分类号: TP391
• 字数: 9568字
• 语种: 中文
• DOI: 10.3969/j.issn.1003-0077.2007.06.007

摘要

本文提出一种基于词语-主题词相关关系的语言模型TSA-LM(Term-Subject Association Based Language Model),它的基本思想是把一篇文档分成两个文档块,一部分是由领域主题词表中的主题词构成的主题词文档块,另一部分是由非主题词构成的非主题词文档块,分别计算两个文档块和查询的似然程度.对非主题词文档块,假设词语间独立无关,沿用经典的语言模型计算;对主题词文档块,把查询词语和主题词相关关系引入语言模型中来估计该文档块和查询的似然程度.词语-主题词相关关系采用词语-主题词相关度来衡量.词语-主题词相关度的计算除了来源于对文档中词语-主题词共现性的观察外,还来源于宏观上对词语-文档-主题词归属关系的观察.公开数据集上的检索实验结果表明,基于词语-主题词相关关系的语言模型可以有效提高检索效果.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	李海华	中国人民大学信息学院	13	180	5.0	13.0
2	田萱	中国人民大学信息学院	4	156	4.0	4.0