视频手势识别的互动演示系统的设计与实现

• 作者: 姬晓飞 王昱 王治博
• 来源期刊: 沈阳航空航天大学学报
• 学科: 航空航天
• 关键词: 人机交互 手势识别 卷积神经网络 虚拟硬件 卡尔曼跟踪 互动演示系统
• 年，卷（期）: 2020,（2）
• 所属期刊栏目: 信息科学与工程
• 页码范围: 56-62
• 页数: 7页
• 分类号: V211
• 字数: 4010字
• 语种: 中文
• DOI: 10.3969/j.issn.2095-1248.2020.02.008

摘要

目前常用的互动演示系统多采用专用硬件,在应用场景及系统造价上均有不足.而最常见的投影演示系统往往不具备交互功能,影响演示效果.在投影演示系统的基础上,增加基于视频的手势识别技术,使投影系统具有交互操作的功能.交互系统功能实现由交互区域检测、手势检测与识别、跟踪与交互三个模块组成.第一个模块主要负责交互区域的检测与定位;第二个模块用于检测并识别交互区域内出现的特定手势;第三个模块通过卡尔曼滤波实现对用户手势的跟踪,并根据手势识别结果操作虚拟硬件,实现人机交互.该系统在复杂环境中进行了大量测试,经验证对照明变化和复杂的背景具有较好的鲁棒性,平均准确度为85.2％.此外利用CPU-GPU并行计算,平均处理速度达到每秒15帧,具有较好的实时处理能力.系统结构简单并且不依赖专用硬件,软件方面使用Python的开源图像和视频处理工具,具有很高的可移植性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	姬晓飞	沈阳航空航天大学自动化学院	46	256	9.0	13.0
2	王昱	沈阳航空航天大学自动化学院	17	89	6.0	9.0
3	王治博	沈阳航空航天大学自动化学院	1	0	0.0	0.0