时域注意力Dense-TCNs在多模手势识别中的应用

• 作者: 张毅 王翀 赵杰煜 郑烨
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: 手势识别 三维密集卷积网络 时间卷积网络 短时时空特征 注意力机制
• 年，卷（期）: 2020,（9）
• 所属期刊栏目: 人工智能与模式识别
• 页码范围: 101-109
• 页数: 9页
• 分类号: TP391.4
• 语种: 中文
• DOI: 10.19678/j.issn.1000-3428.0056808

摘要

为增强时间卷积网络(TCNs)在时间特征提取方面的能力,提出一种基于三维密集卷积网络与改进TCNs的多模态手势识别方法.通过时空特征表示方法将手势视频分析任务分为空间分析和时间分析两部分.在空间分析中采用三维DenseNets学习短期的时空特征,在时间分析中使用TCNs提取时间特征.在此基础上引入注意力机制,使用时域维度的压缩-激励网络调整每个TCNs层特征在时间维度上的权值比重.分别在VIVA和NVGesture两个动态手势数据集上对该方法进行评价,实验结果表明,该方法在VIVA数据集上的正确率为91.54％,在NVGesture数据集上的正确率为86.37％,且与最新的MTUT方法水平相近.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	赵杰煜		82	637	14.0	21.0
2	王翀		3	1	1.0	1.0
3	郑烨		4	0	0.0	0.0
4	张毅		3	0	0.0	0.0