基于人脸姿态估计的多角度虚拟眼镜试戴技术

• 作者: 刘轩 付东翔
• 来源期刊: 电子科技
• 关键词: 头部实时姿态估计 动态定位 人脸特征点定位 欧拉角 透视变换 图像合成 多角度虚拟试戴 ERT 三维空间
• 年，卷（期）: 2021,（9）
• 页码范围: 58-65
• 页数: 8页
• 分类号: TP391
• 语种: 中文
• DOI: 10.16180/j.cnki.issn1007-7820.2021.09.011

摘要

虚拟眼镜试戴手动操作占比高、试戴角度单一、试戴效果失真,所以试戴技术商用率较低.针对这些问题,文中提出了一种基于人脸特征检测与头部空间姿态估计相结合的虚拟试戴技术,并实现了一套虚拟眼镜试戴系统.通过摄像头采集头部实时视频,并按帧分析,采用ERT级联回归定位面部特征点.根据面部特征点位置信息和头部旋转信息将透视变换后的眼镜图像准确融合到对应角度的人脸图像中.在AFLW人脸数据库上对三维实时姿态估计进行了量化评估,±60°内角度误差约为8.8°.结果表明,该算法精度高且速度快,在角度变化频繁、外界光线强弱变化大、背景干扰物较多的复杂情况下仍能快速准确地实现三维多角度虚拟试戴,效果逼真自然,基本满足虚拟试戴技术的要求.