用异质迁移学习构建跨被试脑电情感模型

• 作者: 吕宝粮 石振锋 郑伟龙
• 来源期刊: 计算机学报
• 学科: 工学
• 关键词: 情感脑机接口 多模态情绪识别 跨被试情感模型 迁移学习 脑电信号 眼动信号 扫视轨迹
• 年，卷（期）: 2020,（2）
• 所属期刊栏目: 人工智能与软件
• 页码范围: 177-189
• 页数: 13页
• 分类号: TP18
• 字数: 11769字
• 语种: 中文
• DOI: 10.11897/SP.J.1016.2020.00177

摘要

由于脑电信号的个体差异性和非平稳特性对情感模型性能产生影响,如何构建跨被试脑电情感模型是情感脑-机接口领域的一个重要研究方向.本文提出一种新的从眼睛的扫视轨迹进行知识迁移的异质迁移学习方法,以提升跨被试脑电情感模型的性能.该方法的主要神经生理学依据是,被试的视觉注视诱发了大脑特定的神经活动,而这些神经活动产生的脑电信号可以为情绪识别提供重要的情境线索.为了量化不同被试之间的域差异,我们引入了基于扫视轨迹和基于脑电信号的核矩阵,并提出了改进的直推式参数迁移学习算法,以实现跨被试脑电情感模型的构建.该方法与传统方法相比,具有两个优点:一是利用了目标被试容易获取的眼动追踪数据进行被试迁移;二是在目标被试只有眼动追踪数据的情况下,仍然能够从其他被试的历史数据中学到脑电信号的情绪类别判别信息.为了验证所提方法的有效性,我们对本文提出的方法与已有的迁移方法在三类情绪识别的脑电和眼动数据集上进行了系统的对比实验研究.实验结果表明,基于眼动轨迹的迁移模型取得了与基于脑电信号的迁移模型相当的识别性能.相对于传统的通用分类器50.46％的平均准确率,基于眼动轨迹的迁移模型的平均准确率达到了69.72％.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	吕宝粮	上海交通大学计算机科学与工程系仿脑计算与机器智能研究中心	10	329	6.0	10.0
5	石振锋	上海交通大学计算机科学与工程系仿脑计算与机器智能研究中心	1	0	0.0	0.0