一种结合空间特征的图像注意力标注算法改进研究

• 作者: 周佳 徐守坤 李宁 石林
• 来源期刊: 计算机应用研究
• 关键词: 视觉注意力 图像标注 空间特征
• 年，卷（期）: 2019,（1）
• 所属期刊栏目: 图形图像技术
• 页码范围: 288-291,315
• 页数: 5页
• 分类号: TP391
• 语种: 中文
• DOI: 10.19734/j.issn.1001-3695.2017.08.0869

摘要

针对图像标注和attention机制结合过程中特征选择不充分和预测过程中对空间特征权重比例不足的问题,提出了一种结合空间特征的注意力图像标注方法.首先通过卷积神经网络得到图像特征,特征区域与文本标注序列匹配;然后通过attention机制给标注词汇加权,结合空间特征提取损失函数得到基于空间特征注意力的图像标注;最后分别在Flickr30k和MS-COCO两个数据集上进行验证,通过可视化显示该模型如何自动学习显著区域并生成相应的词汇输出序列.实验结果表明,该方法能较好地提取注意力区域并给出标注,与其他模型对比能够得到更好的标注结果.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	石林	常州大学信息科学与工程学院	29	75	6.0	7.0
5	徐守坤	常州大学信息科学与工程学院	68	194	6.0	10.0
9	周佳	常州大学信息科学与工程学院	3	7	1.0	2.0