基于平移不变字典的语音唇动一致性判决方法

• 作者: 奉小慧 朱铮宇 贺前华
• 来源期刊: 华中科技大学学报（自然科学版）
• 学科: 工学
• 关键词: 音视频处理 稀疏表示 平移不变 一致性分析 字典学习
• 年，卷（期）: 2015,（10）
• 所属期刊栏目: 信息与控制工程
• 页码范围: 69-74
• 页数: 6页
• 分类号: TP391
• 语种: 中文
• DOI: 10.13245/j.hust.151014

摘要

针对传统语音唇动分析模型容易忽略唇动帧间时变信息从而影响一致性判别结果的问题 ,提出一种基于平移不变学习字典的一致性判决方法 .该方法将平移不变稀疏表示引入语音唇动一致性分析 ,通过音视频联合字典学习算法训练出时空平移不变的音视频字典 ,并采用新的数据映射方式对学习算法中的稀疏编码部分进行改进 ;利用字典中的音视频联合原子作为描述不同音节或词语发音时音频与唇形同步变化关系的模板 ,最后根据这种模板制定出语音唇动一致性评分判决准则 .对四类音视频不一致数据的实验结果表明 :本方法与传统统计类方法相比 ,对于少音节语料 ,总体等错误率(EER)平均从23 .6% 下降到11 .3% ;对于多音节语句 ,总体EER平均从22 .1% 下降到15 .9% .

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	贺前华	华南理工大学电子与信息学院	84	507	12.0	17.0
2	朱铮宇	华南理工大学电子与信息学院	8	27	4.0	5.0
3	奉小慧	华南理工大学电子与信息学院	8	46	4.0	6.0