基于眼动跟踪的人机交互应用

• 作者: 贺辉 黄君浩
• 来源期刊: 山东大学学报（工学版）
• 关键词: 视线追踪 人机交互 眼动鼠标 眼动打字
• 年，卷（期）: 2021,（2）
• 所属期刊栏目: 机器学习与数据挖掘|Machine Learning&Data Mining
• 页码范围: 1-8
• 页数: 8页
• 分类号: TP319
• 语种: 中文
• DOI: 10.6040/j.issn.1672-3961.0.2020.346

摘要

使用价格低廉的网络摄像头作为视频源,研究基于眼动识别和视线跟踪在计算机上精确交互的方法.提出一种基于外观人眼视线方向估计的人机交互方法:使用一个简单快速的卷积神经网络模型粗略估计人眼在屏幕上的注视点,进而将眼动识别和不精确视线跟踪结果用于实现在计算机上的精确人机交互.在此基础上开发了眼动鼠标与眼动打字的功能以替代鼠标和键盘硬件.试验结果表明:本研究让使用者仅用一个普通的单目摄像头,就可以实现眼动跟踪,并利用眼动控制完成计算机上大部分精确的交互.