多模态学习方法综述

• 作者: 张德政 李擎 杨宇航 蔡铮 陆子怡 陈鹏
• 来源期刊: 工程科学学报
• 学科: 工学
• 关键词: 多模态学习 统计学习 深度学习 对抗学习 特征表示
• 年，卷（期）: 2020,（5）
• 页码范围: 557-569
• 页数: 13页
• 分类号: TP18
• 语种: 中文

摘要

大数据是多源异构的.在信息技术飞速发展的今天,多模态数据已成为近来数据资源的主要形式.研究多模态学习方法,赋予计算机理解多源异构海量数据的能力具有重要价值.本文归纳了多模态的定义与多模态学习的基本任务,介绍了多模态学习的认知机理与发展过程.在此基础上,重点综述了多模态统计学习方法与深度学习方法.此外,本文系统归纳了近两年较为新颖的基于对抗学习的跨模态匹配与生成技术.本文总结了多模态学习的主要形式,并对未来可能的研究方向进行思考与展望.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张德政	北京科技大学计算机与通信工程学院	61	687	14.0	23.0
3	李擎	北京科技大学自动化学院	115	1522	21.0	36.0
5	杨宇航	北京科技大学自动化学院	2	0	0.0	0.0
8	蔡铮	北京科技大学自动化学院	6	5	1.0	2.0
11	陈鹏	北京科技大学自动化学院	10	174	4.0	10.0
15	陆子怡	北京科技大学自动化学院	1	0	0.0	0.0