计算机应用

北大核心,INSPEC,JST,Pж(AJ),CSCD扩展版

国内刊号:51-1307/TP

国际刊号:1001-9081

计算机应用杂志2026年第3期:多尺度时空解耦的骨架行为识别对比学习

发布日期:

作者:刘晓霞, 况立群, 王松, 焦世超, 韩慧妍, 熊风光

单位:1.中北大学 计算机科学与技术学院,太原 030051;2.机器视觉与虚拟现实山西省重点实验室(中北大学),太原 030051;3.山西省视觉信息处理及智能机器人工程研究中心,太原 030051

关键词:行为识别,人体骨架,门控时空上下文,时空特征提取,对比学习,长短期记忆网络

基金:山西省科技重大专项计划“揭榜挂帅”项目(202201150401021);山西省科技成果转化引导专项(202104021301055);山西省基础研究计划项目(202303021211153);山西省基础研究计划项目(202303021212189);山西省研究生科研创新项目(2024KY614)

针对骨架行为识别中的动态动作建模与多尺度时序融合问题,提出高效多尺度时空解耦对比学习框架(MSTDCLF)。首先,设计多尺度时空特征增强模块(MSTF),结合深度可分离卷积与空洞卷积,从而同步建模短时运动特征与长时周期行为模式;其次,通过嵌入通道-空间联合注意力机制进一步强化关节与特征通道之间的语义响应;再次,使用具有注意力机制的残差网络解决深层网络结构的梯度衰减问题;最后,提出双向门控时空上下文建模(BGSCM),基于双向长短期记忆(BiLSTM)网络构建时空增强分支,通过门控机制在关节拓扑与时序轴中双向传递解耦特征,抑制噪声干扰并建立完整的动作演化依赖。实验结果表明,MSTDCLF在NTU RGB+D 60数据集上的准确率为87.5%(交叉受试者(CS))和93.0%(交叉视角(CV)),在NTU RGB+D 120数据集上的准确率为79.3%(CS)和80.6%(交叉设置(SS)),均优于次优方法SCD-Net(Spatiotemporal Clues Disentanglement Network)。消融实验结果验证了多尺度设计与双向门控机制的有效性,表明MSTDCLF在骨架行为识别中能实现高效的行为表征,有效提高识别精度。

来源:2026年第3期

《计算机应用》期刊编辑部

查看计算机应用杂志2026年第3期

联系我们

  • 地址:四川天府新区兴隆街道科智路1369号
  • 电话:028-85224283-803
  • E-mail:bjb@joca.cn

咨询工作人员