基于关键词识别的语音到手势的转换

• 作者: 杨鸿武 赵娜
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 识别 手势建模 语音到手势转换
• 年，卷（期）: 2016,（21）
• 所属期刊栏目: 模式识别与人工智能
• 页码范围: 146-151,194
• 页数: 7页
• 分类号: TP391.41|TN912.34
• 字数: 5249字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.1605-0113

摘要

针对言语障碍者与正常人的交流问题，提出了一种利用关键词识别技术实现语音到手势转换的方法。首先，对采集到的语音信号，运用关键词识别技术识别出关键词。同时，根据《中国手语》，采用三维建模技术建立关键词对应的三维手势模型。最后，利用OpenGL播放识别出的关键词对应的三维手势模型，从而实现了语音到手势的转换。实验结果表明，字母和数字的语音关键词的平均识别率达到90.1%，转换后的手势平均MOS（Mean Opinion Score）得分为4.4分，能够应用于正常人与言语障碍者的交流。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	杨鸿武	西北师范大学物理与电子工程学院	55	308	11.0	14.0
2	赵娜	西北师范大学物理与电子工程学院	12	18	2.0	4.0