动作切分和流形度量学习的视频动作识别

• 作者: 孔繁胜 罗会兰 赖泽云
• 来源期刊: 中国图象图形学报
• 学科: 工学
• 关键词: 动作识别 动作切分 流形学习 度量学习 特征协方差 视频分析
• 年，卷（期）: 2017,（8）
• 所属期刊栏目: 图像理解和计算机视觉
• 页码范围: 1106-1119
• 页数: 14页
• 分类号: TP391
• 字数: 8520字
• 语种: 中文
• DOI: 10.11834/jig.170032

摘要

目的 为了提高视频中动作识别的准确度,提出基于动作切分和流形度量学习的视频动作识别算法.方法 首先利用基于人物肢体伸展程度分析的动作切分方法对视频中的动作进行切分,将动作识别的对象具体化;然后从动作片段中提取归一化之后的全局时域特征和空域特征、光流特征、帧内的局部旋度特征和散度特征,构造一种7×7的协方差矩阵描述子对提取出的多种特征进行融合;最后结合流形度量学习方法有监督式地寻找更优的距离度量算法提高动作的识别分类效果.结果 对Weizmann公共视频集的切分实验统计结果表明本文提出的视频切分方法具有很好的切分能力,能够作好动作识别前的预处理;在Weizmann公共视频数据集上进行了流形度量学习前后的识别效果对比,结果表明利用流形度量学习方法对动作识别效果提升2.8％;在Weizmann和KTH两个公共视频数据集上的平均识别率分别为95.6％和92.3％,与现有方法的比较表明,本文提出的动作识别方法有更好的识别效果.结论 多次实验结果表明本文算法在预处理过程中动作切分效果理想,描述动作所构造协方差矩阵对动作的表达有良好的多特征融合能力,而且光流信息和旋度、散度信息的加入使得人体各部位的运动方向信息具有了更多细节的描述,有效提高了协方差矩阵的描述能力,结合流形度量学习方法对动作识别的准确性有明显提高.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	孔繁胜	浙江大学计算机科学技术学院	56	825	14.0	27.0
2	罗会兰	江西理工大学信息工程学院	51	445	13.0	18.0
3	赖泽云	江西理工大学信息工程学院	1	5	1.0	1.0