多尺度密集残差网络的单幅图像超分辨率重建

• 作者: 应自炉 龙祥
• 来源期刊: 中国图象图形学报
• 学科: 工学
• 关键词: 单幅图像超分辨率 多尺度卷积核 残差网络 密集型卷积网络 特征提取单元
• 年，卷（期）: 2019,（3）
• 所属期刊栏目: 图像理解和计算机视觉
• 页码范围: 410-419
• 页数: 10页
• 分类号: TP391
• 字数: 5351字
• 语种: 中文

摘要

目的 近几年应用在单幅图像超分辨率重建上的深度学习算法都是使用单种尺度的卷积核提取低分辨率图像的特征信息,这样很容易造成细节信息的遗漏.另外,为了获得更好的图像超分辨率重建效果,网络模型也不断被加深,伴随而来的梯度消失问题会使得训练时间延长,难度加大.针对当前存在的超分辨率重建中的问题,本文结合GoogleNet思想、残差网络思想和密集型卷积网络思想,提出一种多尺度密集残差网络模型.方法 本文使用3种不同尺度卷积核对输入的低分辨率图像进行卷积处理,采集不同卷积核下的底层特征,这样可以较多地提取低分辨率图像中的细节信息,有利于图像恢复.再将采集的特征信息输入残差块中,每个残差块都包含了多个由卷积层和激活层构成的特征提取单元.另外,每个特征提取单元的输出都会通过短路径连接到下一个特征提取单元.短路径连接可以有效地缓解梯度消失现象,加强特征传播,促进特征再利用.接下来,融合3种卷积核提取的特征信息,经过降维处理后与3×3像素的卷积核提取的特征信息相加形成全局残差学习.最后经过重建层,得到清晰的高分辨率图像.整个训练过程中,一幅输入的低分辨率图像对应着一幅高分辨率图像标签,这种端到端的学习方法 使得训练更加迅速.结果 本文使用两个客观评价标准PSNR(peak signal-to-noise ratio)和SSIM(struc-tural similarity index)对实验的效果图进行测试,并与其他主流的方法进行对比.最终的结果显示,本文算法在Set5等多个测试数据集中的表现相比于插值法和SRCNN算法,在放大3倍时效果提升约3.4 dB和1.1 dB,在放大4倍时提升约3.5 dB和1.4 dB.结论 实验数据以及效果图证明本文算法能够较好地恢复低分辨率图像的边缘和纹理信息.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	应自炉	五邑大学信息工程学院	55	346	8.0	16.0
2	龙祥	五邑大学信息工程学院	2	5	1.0	2.0