基于视-触跨模态感知的智能导盲系统

• 作者: 刘华平 孙富春 朱文霖 王博文
• 来源期刊: 智能系统学报
• 学科: 工学
• 关键词: 盲人用户 电子手杖 跨模态技术 触觉 数据集 深度学习 计算机视觉 生成对抗网络
• 年，卷（期）: 2020,（1）
• 所属期刊栏目: 智能系统
• 页码范围: 33-40
• 页数: 8页
• 分类号: TP391.4
• 字数: 5120字
• 语种: 中文
• DOI: 10.11992/tis.201908015

摘要

盲人活动援助是盲人日常生活的重要组成部分.这些技术大多用于帮助盲人导航和躲避障碍物,很少有研究将地面信息转换成一种给用户直观感受的触觉信息.为了满足上述需求,本文提出了一种可以提供触觉反馈的盲人辅助地面识别智能导盲杖系统.试图利用深度生成对抗训练的方法来产生振动触觉刺激,使用改进的DiscoGAN训练了我们的端到端生成网络.为了训练我们的网络,构建了视触跨模态数据集GroVib.通过上机实验和实物实验来评估方案的可行性,通过上机实验结果表明参与者通过触觉识别地面的准确率为84.7％,触觉的平均真实感受得分为71.3,在真实场景实验中,参与者只需平均3.35次尝试就可以根据触觉反馈来识别地面.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	孙富春	清华大学智能技术与系统国家重点实验室	116	2389	20.0	47.0
2	刘华平	清华大学智能技术与系统国家重点实验室	57	650	12.0	24.0
3	王博文	河北工业大学省部共建电工装备可靠性与智能化国家重点实验室	86	900	18.0	27.0
4	朱文霖	河北工业大学省部共建电工装备可靠性与智能化国家重点实验室	1	0	0.0	0.0