表4.2同类识别算法对比的平均识别率图4.4在MSRActionPairs 数据集上平均识别率91.5%的混淆矩阵示意图实验结论:①基于人物交互相似动作识别,本章提出的基于深度图像的多特征融合算法能达到91.5%的平均识别率,充分验证基于交互动作整体结构的识别算法在相似“动作对”中具有较好的辨识性和有效性。......
2023-10-28
该实验在两个公开的动作行为数据集上进行,验证本章所述方法的可行性,并与其他同类算法进行对比。实验选用的数据集均为Kinect 采集的20 个骨架关节点的骨骼模型。第一个数据集是微软研究院公开的MSR-Action3D数据集[30],10 位受试者执行20 类不同动作。对比的同类算法包括Actionlet整体模型[37]、HON4D[68]、深度运动映射(Depth Motion Map,DMM)[57]、最长公共相似子序列[135]及Profile HMM[136]。使用最近邻分类器进行动作分类,其实验结果见表2.2,识别率相应混淆矩阵如图2.6 所示。
表2.2 不同识别算法在MSR-Action3D 数据集识别率对比
图2.6 在MSR-Action3D 数据集上识别率90.5%的混淆矩阵示意图
第二个数据集是微软研究院于2012 年公开的MSRC-12 动作行为数据集[137]。它由30 位受试者执行12 类动作,包括6 个标志性动作(crouch,put goggle,shoot pistol,throw object,change weapon,kick)和6 个隐喻性动作(start system,push right,wind it up,bow,had enough,beat both),共计594 个动作序列。对比的同类算法包括Actionlet 整体模型[37]、HON4D[68]、DMM[57]和Offset Position[137]。同样使用最近邻分类器进行分类,其实验结果见表2.3,本章所述方法获得的动作识别率相应混淆矩阵如图2.7 所示。
表2.3 不同识别算法在MSRC-12 数据集识别率对比(www.chuimin.cn)
图2.7 在MSRC-12 数据集上识别率93.3%的混淆矩阵示意图
实验结论:
①从上述两个实验可以看出,本章算法在MSR-Action3D 数据集上实现了90.5%的最高平均识别率,在MSRC-12 数据集上实现了93.3%的最高平均识别率,充分说明本章提出的张量形状描述子较其他的特征表示方法能更好地描述动作序列的特征。
②本章提出的多线性主成分规整(Multi-linear Principal Component Warping,MPCW)算法不仅弥补了张量模型无法进行时域对齐的问题,而且还解决了在大量数据情况下动态时间规整无法寻到最优规整路径的问题。实验结果表明,该框架比现有同类算法具有更好的性能。张量运算的引入不仅避免了将矩阵拉伸到向量空间丢失结构信息的问题,而且还避免了构造大容量协方差矩阵的问题,极大地降低了运算复杂度。
有关基于图像深度信息的人体动作识别研究的文章
表4.2同类识别算法对比的平均识别率图4.4在MSRActionPairs 数据集上平均识别率91.5%的混淆矩阵示意图实验结论:①基于人物交互相似动作识别,本章提出的基于深度图像的多特征融合算法能达到91.5%的平均识别率,充分验证基于交互动作整体结构的识别算法在相似“动作对”中具有较好的辨识性和有效性。......
2023-10-28
针对上述噪声,本章引入高斯核函数进行滤波处理。同时,高斯核函数还具有单瓣频谱特性,对噪声具有很好的抑制作用。同样,为了获取紧凑的运动特征和更好的传输不变性,实验使用Max-pooling 技术进行下采样,归一化处理,形成向量Sm。......
2023-10-28
图4.1双人交互动作示意图该数据集包含RGB 视频图像、深度图像和骨骼深度信息3 种类型,提供7 位受试者两两组合形成的21 组数据,执行8 类不同的交互动作行为。表4.1同类识别算法对比的平均识别率图4.2在SBU 数据集上基于RGB 图像识别率93.8%的混淆矩阵示意图图4.3在SBU 数据集上基于深度图像识别率98.4%的混淆矩阵示意图实验结论:①基于深度图像数据进行交互动作识别得到的平均识别率为98.4%,高于基于RGB 视频图像序列进行识别的93.8%平均识别率。......
2023-10-28
深度传感器Kinect 采集的深度图像与实时采集的骨骼模型深度信息相比,更能直观和完整地描述动作形状特征以及动态特征。图1.2深度传感器Kinect 采集的图像类型基于深度图像提取的特征主要包括全局特征和局部特征。基于深度图像的局部特征提取方法是人体动作识别领域中的一个研究热点。除了上述常用的人体动作识别研究方法外,还有另外一种研究方法,即将图像序列转换为3D 点云序列数据进行动作识别。......
2023-10-28
表3.1在MoCap 动作序列上提取关键帧从实验可知,本章提出的关键帧提取算法可有效地提取具有代表性的动作序列帧,关键帧序列只占样本序列的2/3 甚至更少,其余的帧均为冗余信息。因此,关键帧提取对减少运算复杂度、提高动作识别率具有重要意义。在关键帧提取实验的基础上,又进行了动作序列的关键轨迹提取实验。......
2023-10-28
由于人体动作的多样性和周边环境的复杂性,使人体动作识别充满了挑战。人体动作识别最初的研究都是基于RGB 视频图像序列,许多学者分别从静态特征、动态特征和时空特征3 个方面对该领域的工作进行了总结[1-4]。虽然基于RGB 视频图像序列的动作识别研究取得了较好的成果,但因其复杂背景、相机视角、光照变化以及遮挡等问题,人体动作识别研究仍然存在诸多挑战。......
2023-10-28
下面简单介绍大部分可公开获取的RGB-D 动作行为数据集。目前有3类人体动作行为数据集,即单视角动作行为数据集、多视角动作行为数据集和双人/多人交互动作行为数据集。单视角动作行为数据集MSR-Action3D[30]数据集是微软研究院2010 年公开的RGB-D 单视角行为数据集。10 个受试者共320 个样本。UTKinect[31]行为数据集是得克萨斯大学2012 年公布的。UTD-MHAD[88]行为数据集是由得克萨斯大学2015 年公布的。8 个受试者每个动作执行4 次。......
2023-10-28
最初,人体动作识别主要是以RGB 视频图像为研究对象,经过多年的努力,人体动作识别技术已取得了较快的发展。本书使用Kinect 传感器采集人体动作的深度图像信息,探讨人体动作识别的相关理论和技术难点,着重研究如何消除可能对识别结果造成的干扰因素,提高人体动作识别的鲁棒性与普适性。......
2023-10-28
相关推荐