融合共现距离和区分度的短文本相似度计算方法

• 作者: 刘文 脱婷 陈海波 马慧芳
• 来源期刊: 计算机工程与科学
• 学科: 工学
• 关键词: 短文本 共现距离相关度 共现区分度 词项加权 相似度计算
• 年，卷（期）: 2018,（7）
• 所属期刊栏目: 人工智能与数据挖掘
• 页码范围: 1281-1286
• 页数: 6页
• 分类号: TP391
• 字数: 5434字
• 语种: 中文
• DOI: 10.3969/j.issn.1007-130X.2018.07.019

摘要

针对短文本内容简短、特征稀疏等特点,提出一种融合共现距离和区分度的短文本相似度计算方法.一方面,该方法在整个短文本语料库中利用两个共现词之间距离计算它们的共现距离相关度.另一方面通过计算共现区分度来提高距离相关度的准确度,然后对每个文本中词项进行相关性加权,最后通过词项的权重和词项之间的共现距离相关度计算两个文本的相似度.实验结果表明,本文提出的方法能够提高短文本相似度计算的准确率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	马慧芳	西北师范大学计算机科学与工程学院	59	520	12.0	21.0
5	刘文	西北师范大学计算机科学与工程学院	6	8	2.0	2.0
6	脱婷	西北师范大学计算机科学与工程学院	2	7	2.0	2.0
7	陈海波	西北师范大学计算机科学与工程学院	2	8	2.0	2.0