【轨迹预测】GraphTCN: Spatio-Temporal Interaction Modelingfor Human Trajectory Prediction

论文地址:

https://openaccess.thecvf.com/content/WACV2021/papers/Wang_GraphTCN_Spatio-Temporal_Interaction_Modeling_for_Human_Trajectory_Prediction_WACV_2021_paper.pdfhttps://openaccess.thecvf.com/content/WACV2021/papers/Wang_GraphTCN_Spatio-Temporal_Interaction_Modeling_for_Human_Trajectory_Prediction_WACV_2021_paper.pdf

 代码地址:【非官方,可参考下面博文】

GraphTCN: Spatio-Temporal Interaction Modeling for Human Trajectory Prediction_coolsunxu的博客-CSDN博客GraphTCN: Spatio-Temporal Interaction Modeling for Human Trajectory Predictionhttps://blog.csdn.net/coolsunxu/article/details/105993644

网络整体结构如图所示:

 问题描述: 

 如图2所示,GraphTCN由三个关键模块组成,包括边缘特征图注意(EFGAT)模块、时间卷积(TCN)模块和一个解码器(Decoder)。

首先,将每个行人的绝对位置和相对位置嵌入到一个固定长度的隐藏空间中,并将这些轨迹特征输入到EFGAT模块。将残差学习机制和跳跃连接纳入网络中,以促进梯度反向传播,并鼓励中间特征的重用。TCN模块是一个前馈的一维卷积网络,具有一个门控激活单元,用于捕获最显著的特征。最后,解码器模块生成所有行人的未来轨迹。

EFGAT Module for Spatial Interaction
同一时刻的行人可以用有向图来进行表示

 节点表示行人,边表示行人间的交互。

图的邻接矩阵表示行人的空间关系 

 在这个任务中,将节点的空间关系表示为一个非对称的、非负的矩阵,因为agent之间的影响应该根据它们的相对运动行为而不同。因此,作者不引入具有无向空间距离的图,而是引入相对空间位置作为邻接矩阵的先验边缘特征知识。

 其中,φs(·)通过线性变换将相对距离特征嵌入到更高维的F1,Ws为嵌入权重。

将可学习的边权值和节点特征输入图3所示的图注意层,以捕获空间交互。

未完! 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

乐亦亦乐

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值