基于反馈注意力机制和上下文融合的非模式实例分割

• 作者: 董俊杰 刘华平 谢珺 续欣莹 孙富春
• 来源期刊: 智能系统学报
• 关键词: 非模式实例分割 遮挡预测 反馈连接 注意力机制 上下文信息 深度学习 神经网络 计算机视觉
• 年，卷（期）: 2021,（4）
• 所属期刊栏目: 吴文俊人工智能科学技术奖论坛|Forum of Recipients of Wu Wenjun Artificial Intelligence Science and Technology Award
• 页码范围: 801-810
• 页数: 10页
• 分类号: TP183
• 语种: 中文
• DOI: 10.11992/tis.202007042

摘要

非模式实例分割是最近提出的对实例分割的扩展,其任务是对每个对象实例的可见区域和被遮挡区域都进行预测,感知完整的物理结构和语义概念.在预测对象被遮挡部分的形状和语义时,往往由于特征表示的识别能力不够和对上下文信息缺乏而导致对遮挡区域预测欠拟合甚至错误.针对这个问题,提出一个上下文注意模块和反馈注意力机制的特征金字塔结构,引入反馈连接进行再学习.该方法能够有效捕获全局语义信息和精细的空间细节,通过在COCO-amodal数据集训练和验证,非模式实例分割掩码平均精确率从8.4％提高到14.3％,平均召回率从16.6％提高到20.8％.实验结果表明,该方法能够显著提高对物体被遮挡部分预测的准确率,有效解决欠拟合问题.