Spatio-Temporal Representation With Deep Neural Recurrent Network in MIMO CSI Feedback简记

Spatio-Temporal Representation With Deep Neural Recurrent Network in MIMO CSI Feedback简记

参考
简记
  • ConvlstmCsiNet的宏观架构如下
    • 在这里插入图片描述
    • 首先第一点,该结构采用了3D卷积(可以看encoder中有卷积核大小3x3x3)
    • 其次,引入了lstm结构,这个这篇挺像的:Mino Channel Infomation Feedback Using Deep Recurrent Networ
LSTM结构
  • lstm的结构可以参考笔记:RNN&LSTM
  • 另外,B站搜李沐,他LSTM讲的很透彻
  • 在这里插入图片描述
深度可分离卷积
  • 特征恢复中的深度可分离卷积:在特征恢复模块中,所有的标准卷积被深度可分离卷积(DS-Conv)替换,这种替换不仅减少了参数两,而且有助于RefineNet实现更好的性能和更高的恢复精度。
  • 我在这篇笔记中提到过深度可分离卷积:MobileNet,主要是减少计算量用的
  • 在这里插入图片描述
P3D blocks
  • 作者设计了三种P3D block,如下所示
  • 这里主要是考虑时间和空间滤波器之间是否会直接或间接的相互影响或最终的输出
  • 关于这点作者后面做了个实验,就是说性能A>C>B,说明时空滤波器的级联方式比并行方式的性能更好(ResNet yyds)
  • 在这里插入图片描述
评价指标
  • Normalized Mean Square Error (NMSE)
    • 在这里插入图片描述
  • Cosine Similarity ρ
    • 表示output和input之间的相似度
    • 在这里插入图片描述
  • loss还是用的MSE,这里我尝试过NMSEloss,发现有提升的效果,Cosine Similarity ρ也可以考虑试试做成loss
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
时空动作检测(spatio-temporal action detection)是一项计算机视觉任务,旨在从视频片段中准确地检测和识别出发生的动作。与传统的动作识别任务相比,时空动作检测旨在通过不仅仅检测动作在空间上的出现,还要捕捉动作在时间上的变化。 时空动作检测往往涉及以下几个主要步骤: 1. 帧级特征提取:首先,利用现有的特征提取技术,从每个视频帧中提取稳定而有信息量的特征,以捕捉空间信息。 2. 时间建模:接下来,通过对连续帧之间的变化进行建模,来捕捉动作的时间相关性和动态信息。这可以通过各种技术,如光流,差分图和循环网络等来实现。 3. 动作检测:在获得空间和时间特征后,利用学习算法(如深度神经网络)来进行动作检测。这通常通过将时空特征输入到分类器,然后根据预先训练的模型推断动作类别和位置。 4. 时空定位:最后,定位动作在视频中的准确位置。这可以通过在时间上进行滑窗检测,并使用非极大值抑制来抑制重叠检测结果来实现。 时空动作检测在很多领域具有广泛应用,比如视频监控、智能交通、运动分析和人机交互等。通过准确地检测和识别动作,我们可以实现更精确的行为理解和动作预测,从而为许多实际应用带来便捷和效益。然而,时空动作检测仍然存在一些挑战,如动作遮挡、背景干扰和不同尺度的动作等问题,所以该领域的研究仍在不断发展和进步。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

椰子奶糖

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值