3DMM与GAN结合的实时人脸表情迁移方法

• 作者: 刘春平 陈虎 高翔 黄法秀
• 来源期刊: 计算机应用与软件
• 学科: 工学
• 关键词: 表情迁移 三维重建 表情融合 对抗生成 人脸检测 深度学习
• 年，卷（期）: 2020,（4）
• 所属期刊栏目: 多媒体技术应用
• 页码范围: 119-126
• 页数: 8页
• 分类号: TP3
• 字数: 4436字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-386x.2020.04.020

摘要

快速实时生成表情逼真、姿态自然的虚拟人脸一直是较为有挑战性的研究.提出一种基于3DMM与GAN结合的实时人脸表情迁移方法.通过目标人脸的一段表演视频,将表演人员与目标人脸关键点建立映射关系,使用二维RGB摄像头实时跟踪表演人脸关键点并利用GAN生成目标虚拟人脸特征点,进一步估计人脸姿态.利用3 DMM构成二维到三维人脸模型的重建,实时渲染出当前姿态的二维人脸表情,再将表演人脸表情与目标人脸表情进行融合,生成表情逼真的目标人脸.对比实验表明,该方法能得到更为逼真的人脸表情,可以模仿出目标人脸真实的表情,同时也能够达到实时性,在创建逼真的视频方面实现了更大的灵活性.同时,提出一种针对人脸表情迁移仿真效果的验证方法可以客观评价仿真人脸的结果.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	陈虎		27	134	5.0	11.0
5	黄法秀		2	0	0.0	0.0