基于注意力特征提取网络的图像描述生成算法

• 作者: 周南 李金轩 杜军平
• 来源期刊: 南京信息工程大学学报
• 学科: 工学
• 关键词: 注意力机制 图像描述 长短期记忆网络 图像特征提取
• 年，卷（期）: 2019,（3）
• 页码范围: 295-301
• 页数: 7页
• 分类号: TP391.1
• 字数: 5640字
• 语种: 中文
• DOI: 10.13878/j.cnki.jnuist.2019.03.007

摘要

针对解决图像描述生成中对浅层图像特征利用不充分、图像目标间关系提取不足的问题,提出一种基于注意力图像特征提取的图像描述生成算法.通过语言模型上下文信息对不同深度图像特征进行自适应注意力权重分配,使带有注意力的图像特征参与指导图像描述生成,提升了图像描述生成的效果.在MSCOCO测试集中所提算法的BLEU-1和CIDEr得分分别达到0.752和0.934,从而验证了所提算法的有效性.