基于特征融合时序分割网络的行为识别研究

• 作者: 丁宇鹏 张士兵 李洪均 李超波
• 来源期刊: 计算机研究与发展
• 学科: 工学
• 关键词: 行为识别 稀疏特征 时序分割网络 双流卷积网络 特征融合
• 年，卷（期）: 2020,（1）
• 所属期刊栏目: 人工智能
• 页码范围: 145-158
• 页数: 14页
• 分类号: TP391
• 字数: 8011字
• 语种: 中文
• DOI: 10.7544∕issn1000-1239.2020.20190180

摘要

行为识别是当今计算机视觉领域的一个研究热点,是一项具有挑战性的任务.行为识别分析与其网络输入数据类型、网络结构、特征融合环节具有密切联系.目前,主流的行为识别网络输入数据为RGB图像和光流图像,网络结构主要以双流和3 D卷积为主;而特征选择直接影响到识别的效率,多层次的特征融合工作还有很多问题有待解决.针对主流的双流卷积网络输入数据为 RGB图像和光流图像的局限,利用低秩空间中稀疏特征能够有效捕捉视频中运动物体信息的特点,对网络输入数据进行补充.同时,针对网络中缺乏信息交互的特点,将深度网络中高层语义信息和低层细节信息结合起来共同识别行为动作,使时序分割网络性能更具优势.在行为识别数据集 UCF101 和 HMDB51 上取得了97.1％和 76.7％的识别效果,较目前主流算法有了较大的提升.实验结果表明,该方法能够有效地提高行为识别的识别率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张士兵	南通大学信息科学技术学院	107	434	10.0	15.0
3	李洪均	南通大学信息科学技术学院	18	65	5.0	6.0
19	丁宇鹏	南通大学信息科学技术学院	1	0	0.0	0.0
20	李超波	南通大学信息科学技术学院	3	10	1.0	3.0