基于深度体素流的模糊视频插帧方法

• 作者: 林传健 童同 邓炜 高钦泉
• 来源期刊: 计算机应用
• 学科: 工学
• 关键词: 深度学习 卷积神经网络 去模糊 体素流 视频插帧
• 年，卷（期）: 2020,（3）
• 所属期刊栏目: 虚拟现实与多媒体计算
• 页码范围: 819-824
• 页数: 6页
• 分类号: TP391|TP183
• 字数: 5270字
• 语种: 中文
• DOI: 10.11772/j.issn.1001-9081.2019081474

摘要

针对视频运动模糊严重影响插帧效果的情况,提出了一种新型的模糊视频插帧方法.首先,提出一种多任务融合卷积神经网络,该网络结构由两个模块组成:去模糊模块和插帧模块.其中,去模糊模块采用残差块堆叠的深度卷积神经网络(CNN),提取并学习深度模糊特征以实现两帧输入图像的运动模糊去除;插帧模块用于估计帧间的体素流,所得体素流将用于指导像素进行三线性插值以合成中间帧.其次,制作了大型模糊视频仿真数据集,并提出一种先分后合、由粗略至细致的训练策略,实验结果表明该策略促进了多任务网络有效收敛.最后,对比前沿的去模糊和插帧算法组合,实验指标显示所提方法合成中间帧时峰值信噪比最少提高1.41 dB,结构相似性提升0.020,插值误差降低1.99.视觉对比及重制序列展示表明,所提模型对于模糊视频有着显著的帧率上转换效果,即能够将两帧模糊视频帧端对端重制为清晰且视觉连贯的三帧视频帧.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	童同		3	2	1.0	1.0
2	邓炜		1	0	0.0	0.0