基于概率图模型的多模态数据联合检索算法

• 作者: 何俊林 卢颖 孙连海 甘胜江
• 来源期刊: 现代电子技术
• 关键词: 多模态检索 概率图模型 极大似然估计 产生式模型
• 年，卷（期）: 2017,（5）
• 所属期刊栏目: 信号与图像处理
• 页码范围: 33-37
• 页数: 5页
• 分类号: TN919-34|TP391
• 语种: 中文
• DOI: 10.16652/j.issn.1004-373x.2017.05.009

摘要

为了提高多模态检索的性能,提出一种多模态文档语义生成模型以及基于该模型的多模态数据联合检索算法.多模态文档语义生成模型认为文档中每个模态数据都是由相同的语义概念生成的,并且文档是多个模态数据的联合分布.为了简化模型的求解过程,假设各个模态数据之间的生成过程是相互独立的,于是可以对每个模态的条件概率进行单独计算.在多模态联合检索中,通过计算查询数据和待检索文档的联合概率来计算它们之间的相似度.实验结果表明,提出的方法与两步检索、语义索引和排序学习三种多模态检索方法相比具有更好的检索性能.此外,该方法可以扩展应用到具有三个及以上模态数据的文档联合检索中.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	卢颖	西安工业大学计算机科学与工程学院	26	46	4.0	4.0
2	孙连海	成都师范学院计算机科学学院	22	50	2.0	6.0
3	何俊林	成都师范学院计算机科学学院	18	21	2.0	3.0
4	甘胜江	成都师范学院计算机科学学院	13	25	3.0	4.0