基于深度学习的多特征融合人体动作识别算法

徐海宁; 王彦坤; 樊勇; 文奴

doi:10.16339/j.cnki.jsjsyzdh.202504006

计算技术与自动化 ›› 2025, Vol. 44 ›› Issue (04) : 31 -37. DOI: 10.16339/j.cnki.jsjsyzdh.202504006

基于深度学习的多特征融合人体动作识别算法

徐海宁, 王彦坤, 樊勇, 文奴

作者信息 +

Author information +

文章历史 +

PDF

摘要

针对传统特征提取方式计算量大，识别率低等问题，提出了一种基于深度学习的多特征融合人体动作识别算法。方法首先提取原始深度视频序列，接着对每帧图像旋转特定角度补充更多视角下的动作信息，提出自适应时间模型将深度视频序列划分为若干子动作。通过累积每帧图像之间能量变化较大的部分形成动态能量图，累积能量变化较小的部分形成静态能量图，统一称之为运动能量图。引入多通道卷积神经网络提取运动能量图中的动态特征和静态特征；引入自适应矩估计调整神经网络训练中每个参数的学习率，提高模型训练的效率和稳定性；引入L2范数正则化，减小模型复杂度并防止过拟合。在公开的数据集UTD-MHAD、MSR Action3D和MSR DailyActivity3D数据库上测试，算法能够有效地提取动作的运动信息并取得较好的识别结果，与主流方法比有一定的提升。