一种应用于语义分割的新型亲和力监督方法

• 作者: 曹露濛 杨周旺
• 来源期刊: 信息技术与网络安全
• 关键词: 语义分割 卷积神经网络 亲和力矩阵 自注意力
• 年，卷（期）: 2021,（7）
• 所属期刊栏目: 人工智能|Intelligent Algorithm
• 页码范围: 66-71
• 页数: 6页
• 分类号: TP389.1
• 语种: 中文
• DOI: 10.19358/j.issn.2096-5133.2021.07.011

摘要

语义分割是计算机视觉领域一项基本且具有挑战性的任务,最近的语义分割研究工作,着力于设计注意力机制和全局性模块,而在注意力机制中,亲和力矩阵是非常重要的部份.传统的亲和力矩阵是以注意力机制的一部分嵌入在神经网络中,通常作为特征融合的权重来使用.尝试直接将亲和力矩阵应用于注意力机制之外,与语义标签联系起来.首先定义标签亲和力矩阵,再在语义分割网络输出层计算亲和力矩阵,将两个矩阵结合起来,得到一个辅助的惩罚函数.标签亲和力矩阵可以视为一种结构上的监督信息,能辅助训练语义分割网络.在NYUv2数据集上的实验结果表明,惩罚函数有助于提高语义分割网络的精度,并且效果显著.