基于多模态组合模型的语音情感识别

• 作者: 徐计 王力 陈军
• 来源期刊: 软件
• 学科: 工学
• 关键词: 单模态模型 多模态组合模型 超参数优化 语音情感识别 交叉验证 自动组合
• 年，卷（期）: 2019,（12）
• 所属期刊栏目: 基金项目论文
• 页码范围: 56-60,214
• 页数: 6页
• 分类号: TN912.3
• 字数: 4431字
• 语种: 中文
• DOI: 10.3969/j.issn.1003-6970.2019.12.013

摘要

语音情感识别在人机交互、人工智能(AI)、自然语言处理(NLP)、5G技术等方面扮演着重要的角色.为了克服单模态模型语音情感识别率低和手工调参的缺点,本文首先在Gaurav Sahu的基础模型上增加KNN、CNB和Adaboost单模态模型,提出多模态组合模型C3;然后应用排列组合方法通过计算机实现自动组合,克服Gaurav Sahu手工组合存在的不足;最后用超参数优化方法和交叉验证方法对网络模型进行训练和测试,解决手工调参存在的不足.在IEMOCAP数据集上对本文提出的C3进行实验,实验结果表明,C3比Gaurav Sahu提出的多模态组合模型E2的语音情感识别性能提升1.56％.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王力	贵州大学大数据与信息工程学院	39	309	9.0	15.0
5	陈军	贵州大学大数据与信息工程学院	18	70	5.0	7.0
6	徐计	贵州工程应用技术学院信息工程学院	1	0	0.0	0.0