基于人脸表情和语音的双模态情感识别

• 作者: 卢官明 李海波 王珊珊 闫静杰
• 来源期刊: 南京邮电大学学报（自然科学版）
• 学科: 工学
• 关键词: 人脸表情 语音 双模态情感识别 稀疏典型相关分析
• 年，卷（期）: 2018,（1）
• 所属期刊栏目: 通信与电子
• 页码范围: 60-65
• 页数: 6页
• 分类号: TP391
• 字数: 3017字
• 语种: 中文
• DOI: 10.14132/j.cnki.1673-5439.2018.01.007

摘要

在未来的人工智能领域中,计算机的情感识别能力将扮演越来越重要的角色.针对人脸表情和语音的双模态情感识别,文中提出了一种基于稀疏典型相关分析的特征融合方法.首先,分别提取人脸表情和语音两个模态的情感特征,然后采用稀疏典型相关分析方法对两个模态的情感特征进行融合,最后采用K近邻分类器进行情感识别.实验结果表明文中提出的基于稀疏典型相关分析的双模态情感识别方法能够比语音单模态和人脸表情单模态情感识别取得更高的识别率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	卢官明	南京邮电大学通信与信息工程学院	74	904	16.0	29.0
2	王珊珊	南京中医药大学科学技术与产业处	13	34	4.0	5.0
3	闫静杰	南京邮电大学通信与信息工程学院	16	123	5.0	11.0