使用paddlepaddle复现representation flow for action recognition

本博客记录了百度特别推出的全球顶会深度学习论文复现营中representation_flow复现的过程及心得。
复现过程:
1.阅读论文(本博客主要记录与复现相关的内容,详细的论文内容后期会出相应博客):
论文的核心网络rep_flow_layer:
在这里插入图片描述
这是本篇论文的灵魂,理解该网络的推理过程需要结合光流TV_L1的数学公式,但在复现过程中我们可以借鉴作者的源码,因此不需要花太多精力进行这部分的复现。
主要网络结构flow_2d_resnets(复现要求2d):
在这里插入图片描述

作者的实验结果,这部分很重要,不仔细读很容易在复现过程中走弯路,以下是几个复现过程中比较重要的实验结果:
在这里插入图片描述
效果最好的是加载block3后面
在这里插入图片描述
FCF的网络结构效果最优,复现过程中可直接使用这种结构
在这里插入图片描述
最终的验收标准77.2
2.代码部分:
pytorch

paddlepaddle:待开源
3.趟过的坑
(1)论文主要实验结果应该都是使用224的图片尺寸得出的,但在作者源码上均是112的,这部分不改的话很难达到作者的精度。
(2)前期的训练效果与作者相差过大,主要是没看到作者最佳结果是使用FCF得来的
(3)数据增强,虽然作者源码只使用了一种数据增强(随机裁剪),但是我们可以尝试添加一些其他的数据增强方法(很容易爆内存)

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值