基于注意力反馈机制的深度图像标注模型

• 作者: 沈炜 邓远远
• 来源期刊: 浙江理工大学学报（自然科学版）
• 学科: 工学
• 关键词: 卷积神经网络 深度学习 图像识别 注意力机制
• 年，卷（期）: 2019,（2）
• 所属期刊栏目: 电子信息技术
• 页码范围: 208-216
• 页数: 9页
• 分类号: TP181
• 字数: 4423字
• 语种: 中文
• DOI: 10.3969/j.issn.1673-3851(n).2019.02.011

摘要

针对图像标注任务提出了一种基于注意力反馈机制的深度图像标注模型.该模型采用编码器-解码器框架;编码器采用VGG-16的网络结构,以提取图像的特征信息;在解码器部分设计了一种堆叠方式自上而下的处理注意力信息,使网络的每一层都可以获得额外的特征信息.然后从生成的标注语句中提取特征,将关注特征和图像的关注区域结合,增强和图像关注区域的匹配性,使生成的标注语句近似真实语境.在Flickr8k、Flickr30k和MSCOCO等数据集进行实验,实验结果显示,所提出模型的识别率比经典图像识别模型高5％～9％.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	沈炜	浙江理工大学信息学院	43	219	6.0	13.0
2	邓远远	浙江理工大学信息学院	2	4	1.0	2.0