基于关键点的残差全连接网络动态手势识别方法

• 作者: 张云峰 张超 吕钊
• 来源期刊: 安徽大学学报（自然科学版）
• 学科: 工学
• 关键词: 车载场境 关键点 残差网络 深度学习 手势识别
• 年，卷（期）: 2022,（2）
• 所属期刊栏目: 计算机科学与技术
• 页码范围: 30-38
• 页数: 9页
• 分类号: TP391
• 语种: 中文
• DOI: 10.3969/j.issn.1000-2162.2022.02.005

摘要

车载动态场景下,为了提高基于视频手势识别的准确率和鲁棒性,提出了一种基于关键点的残差全连接网络手势识别算法.对在不同车辆平台、不同运动条件下采集的不同光照强度的视频数据进行归一化等预处理后提取视频帧的关键点,以关键点个数为准则进行了关键帧选取以提高运算性能和降低算法复杂度,将从关键帧中所提取的关键点送入残差全连接网络实现连续手势的识别.在不同光线与车内环境下,所提算法对6类动态手势的平均识别准确率达到96.72％,相较3D卷积神经网络(C3D)、卷积神经网络(convolutional neural network,简称CNN)、长短时记忆网络(long short-term memory network,简称LSTM)和双流网络,其识别率分别提升了10.72％,6.40％,5.17％和4.50％.实验结果验证了所提算法在车载环境下连续手势识别的有效性.