多媒体情感标签标注中音频信号重要性分析

• 作者: 郭雷 陈墨
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 情感计算 情感标签标注 脑电图 多模态融合
• 年，卷（期）: 2018,（9）
• 所属期刊栏目: 热点与综述
• 页码范围: 1-4
• 页数: 4页
• 分类号: TP37
• 字数: 4134字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.1711-0361

摘要

情感标签标注是情感计算中的一个重要领域.该领域中针对音频、图像和多媒体内容的情感标签标注已有多个相关工作发表.为分析某个基于脑电图的大脑编码的多媒体情感标签标注中音频信号的重要性,情感计算公开数据库DEAP被用作测试基准.基于DEAP数据库的多媒体刺激,共提取了音频特征和三类视频特征.首先仅使用视频特征基于该框架进行多媒体标签标注任务,之后联合使用音频和视频特征进行同样的工作.实验结果表明,与仅使用视频特征的结果相比,联合使用音视频特征可以提高标注准确率,并且没有因为增加特征维数造成性能损失.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	郭雷	西北工业大学自动化学院	262	2986	27.0	40.0
2	陈墨	西北工业大学自动化学院	1	0	0.0	0.0