基于级联多尺度信息融合对抗网络的红外仿真

• 作者: 刘圣杰 崔家礼 李彤 袁飞 贾瑞明
• 来源期刊: 光学学报
• 学科: 工学
• 关键词: 图像处理 红外图像仿真 生成对抗网络 图像域转换 感受野
• 年，卷（期）: 2020,（18）
• 所属期刊栏目: 图像处理
• 页码范围: 73-82
• 页数: 10页
• 分类号: TP391
• 语种: 中文
• DOI: 10.3788/AOS202040.1810001

摘要

提出了一种应用于红外图像仿真的级联多尺度信息融合生成对抗网络,能由可见光图像估计对应的红外图像.针对可见光与红外图像特征之间的关联与区别,该网络采用级联的对抗网络结构:第一级对抗网络以语义分割图像为辅助任务,使用大感受野的卷积网络结构,重建红外图像的结构信息;第二级对抗网络以可见光的灰度反转图像为辅助任务,采用小感受野的网络结构,补充红外仿真图像的细节纹理信息,并使用多尺度融合模块整合多感受野信息以提升算法精度.在先进算法的通用数据集上进行实验,结果表明,级联多尺度信息融合对抗网络能够实现可见光到红外图像的转换,可得到结构与纹理都较正确的红外仿真图像,在多种客观指标与主观感受上均优于其他类似算法.