潜在图神经网络学习笔记(Latent Graph Neural Networks for Human Skeleton-based Action Recognition)

本文介绍了利用潜在图神经网络(LGNN)进行人体骨架动作识别的方法,通过高k值的长期时空模型捕捉动作信息,并在隐空间中采用成对距离归一化减少冗余信息,实现端到端训练。实验表明LGNN在处理骨架序列的时空动态和复杂动作识别任务上表现优越。
摘要由CSDN通过智能技术生成

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档

潜在图神经网络学习笔记(Latent Graph Neural Networks for Human Skeleton-based Action Recognition)


前言

我们的方法涉及设计一个具有高k值的长期时空模型,以有效地捕获潜在时空域内的动作信息,从而表示骨架序列的时空动态
为了增强远距离节点之间的特征信息并解决冗余信息,我们在隐空间中引入了成对距离归一化操作。这种操作促进了LGNN的形成,其中两个基本的LGNN流无缝地合并到一个网络中,从而实现了端到端的训练。

文章内容

1.前言

在本文中,我们从一个新的角度来解决这个问题,通过将非结构化的骨架数据映射到潜在空间,如图2所示,这里称为潜在特征空间或嵌入空间,其中一组项嵌入在一个流形中[ 1 ],并且在潜在空间中彼此更相似的项被放置在彼此更接近的位置。潜在空间中的位置可以被认为是由一组潜在变量定义的,这些潜在变量来源于对象的相似性。将骨架数据嵌入到流形中,消除了远近邻居之间的冗余依赖关系,以解决加权问题。得到具有多尺度聚合特征的稀疏图矩阵结构,以更好地理解骨骼关节的直接加权信息。
在过去[ 2 ]中,平滑往往发生在卷积操作下,产生了大量的冗余信息,而过多的堆叠网络层数会导致较差的性能。我们对潜在空间中的图书数据进行成对距离归一化操作,减少了过平滑现象的发生,提高了我们实验中的识别性能。
以下是我们的主要贡献:

  • 4
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值