基于前景感知视觉注意的半监督视频目标分割

• 作者: 付利华 赵宇 姜涵煦 赵茹 吴会贤 闫绍兴
• 来源期刊: 电子学报
• 学科: 工学
• 关键词: 视频目标分割 孪生网络 特征空间 前景感知 视觉注意力
• 年，卷（期）: 2022,（1）
• 所属期刊栏目: 学术论文|PAPERS
• 页码范围: 195-206
• 页数: 12页
• 分类号: TP391.41
• 语种: 中文
• DOI: 10.12263/DZXB.20201256

摘要

半监督视频目标分割是计算机视觉领域中的一个研究热点.传统半监督视频目标分割方法的网络模型缺乏对相似目标的判别力,且传统的掩码传播方式对模型的指导能力较弱.本文提出一种基于前景感知视觉注意的半监督视频目标分割方法.三流孪生编码器将输入图像映射到同一特征空间,使得相同目标具有相似的特征.基于前景感知的视觉注意将编码器输出的特征进行相似度匹配,并利用分割掩码突显前景特征,形成前景感知视觉注意,以此关注给定的分割目标,提升模型对待分割目标的判别力.基于残差细化的解码器采用残差学习的思想,融合当前帧图像的低阶特征,逐步改善分割细节.在公开基准数据集上的实验结果表明,本文方法可以较好地解决相似目标容易产生混淆等问题,并能较为准确地跟踪给定的分割目标.