基于图的人-物交互识别

• 作者: 吴伟 刘泽宇
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 人-物交互 上下文 注意力机制 图注意力网络
• 年，卷（期）: 2021,（3）
• 所属期刊栏目: 模式识别与人工智能
• 页码范围: 175-181
• 页数: 7页
• 分类号: TP391
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.1911-0103

摘要

提出了一种基于图的人与物体的交互(Human-Object Interactions,HOIs)识别方法.为了对静态图像中人与物体间丰富的交互关系进行有效的表示,采用具有强大关系建模能力的图结构为图像生成对应的人-物交互关系图.为了对图像中上下文(context)信息加以利用,提出了引入注意力机制的特征处理网络(Feature Processing Network,FPNet).通过图注意力(Graph Attention Network,GAT)网络完成对真实的HOIs的检测和识别.该方法在V-COCO数据集与HICO-DET数据集上进行了验证,并与其他方法进行了比较,结果表明该方法具有较好的效果.