一种基于多模态主题模型的图像自动标注方法

• 作者: 付琨 田璟 郭智 黄宇 黄廷磊
• 来源期刊: 国外电子测量技术
• 学科: 工学
• 关键词: 图像标注 主题模型 隐狄利克雷分配 Gibbs采样
• 年，卷（期）: 2015,（5）
• 页码范围: 22-26
• 页数: 5页
• 分类号: TP391|TN911.73
• 字数: 3651字
• 语种: 中文

摘要

大部分传统的图像自动标注方法需要训练数据中具有精准的标注词，然而这样的数据通常是需要人工标注的，因此获取成本较高，且存在一定的主观性。该文提出一种全新的图像自动标注方法，通过结合自然语言理解领域实体识别的技术，充分利用图像周边自带环绕文本，将图像视觉特征、环绕文本以及实体抽取所得到的能够描述图像中显著特征的词在概率主题模型中进行联合建模，学习到多种数据模态之间的关联关系，从而实现图像的自动标注。在UIUC Pascal Sentence数据集上的实验证明该方法比传统方法具有更好的图像标注预测以及检索性能。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	郭智	中国科学院电子学研究所地理空间信息处理与应用系统技术重点实验室	26	115	6.0	9.0
2	付琨	中国科学院电子学研究所地理空间信息处理与应用系统技术重点实验室	44	461	12.0	19.0
3	黄宇	中国科学院电子学研究所地理空间信息处理与应用系统技术重点实验室	45	368	11.0	17.0
4	黄廷磊	中国科学院电子学研究所地理空间信息处理与应用系统技术重点实验室	16	59	4.0	5.0
5	田璟	中国科学院电子学研究所地理空间信息处理与应用系统技术重点实验室	2	11	2.0	2.0