结构细化的神经风格迁移

• 作者: 沈瑜 杨倩 陈小朋 苑玉彬 张泓国 王霖
• 来源期刊: 电子与信息学报
• 关键词: 图像处理 深度学习 神经网络 风格迁移 边缘检测 归一化
• 年，卷（期）: 2021,（8）
• 所属期刊栏目: 图像与智能信息处理|Image and Intelligent Information Processing
• 页码范围: 2361-2369
• 页数: 9页
• 分类号: TN911.73|TP391
• 语种: 中文
• DOI: 10.11999/JEIT200211

摘要

风格迁移过程中风格元素均匀分布在整个图像中会使风格化图像细节模糊,现有的迁移方法主要关注迁移风格的多样性,忽略了风格化图像的内容结构和细节信息.因此,该文提出结构细化的神经风格迁移方法,通过增加边缘检测网络对内容图像的轮廓边缘进行提取实现风格化图像内容结构的细化,凸显内容图像中的主要目标;通过对转换网络中的常规卷积层的较大卷积核进行替换,在具有相同的感受野的条件下,使网络模型参数更少,提升了迁移速度;通过对转换网络中的常规卷积层添加自适应归一化层,利用自适应归一化在特征通道中检测特定样式笔触产生较高的非线性同时保留内容图像的空间结构特性来细化生成图像的结构.该方法能够细化风格化图像的整体结构,使得风格化图像连贯性更好,解决了风格纹理均匀分布使得风格化图像细节模糊的问题,提高了图像风格迁移的质量.