语义耦合相关的判别式跨模态哈希学习算法

• 作者: 严双咏 刘长红 叶继华 江爱文 王明文
• 来源期刊: 计算机学报
• 学科: 工学
• 关键词: 跨模态检索 跨模态哈希 线性分类器 语义相关性 共享子空间 多模态
• 年，卷（期）: 2019,（1）
• 页码范围: 164-175
• 页数: 12页
• 分类号: TP18
• 字数: 9182字
• 语种: 中文
• DOI: 10.11897/SP.J.1016.2019.00164

摘要

基于哈希的跨模态检索以其存储消耗低、查询速度快等优点受到广泛的关注.跨模态哈希学习的核心问题是如何对不同模态数据进行有效地共享语义空间嵌入学习.大多数算法在对多模态数据进行共享空间嵌入的过程中忽略了特征表示的语义判别性,从而导致哈希码表示的类别区分性不强,降低了最近邻搜索的准确性和鲁棒性.该文提出了基于语义耦合相关的判别式跨模态哈希特征表示学习算法.算法在模型的优化目标函数设计上综合了线性判别分类器的思想和跨模态相关性最大化思路,通过引入线性分类器,使得各模态都能够分别学习到各自具有判别性的二进制哈希码.同时利用耦合哈希表示在嵌入语义空间中最大化不同模态之间的相关性,不仅克服了把多种数据投影到一个共同嵌入语义空间的缺陷,而且能够捕捉到不同模态之间的语义相关性.算法在Wiki、LabelMe以及NUS_WID三个基准数据集上与最近相关的算法进行了实验比较.实验结果表明该文提出的方法在检索精度和计算效率上有明显的优势.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	叶继华	江西师范大学计算机信息工程学院	59	373	11.0	16.0
2	刘长红	江西师范大学计算机信息工程学院	17	104	5.0	9.0
3	王明文	江西师范大学计算机信息工程学院	115	1470	19.0	34.0
4	江爱文	江西师范大学计算机信息工程学院	11	57	4.0	7.0
5	严双咏	江西师范大学计算机信息工程学院	1	5	1.0	1.0