论文阅读:Contextual Translation Embedding for Visual Relationship Detection and SGG(PAMI2020)

还是论文题目太长打不下了(SGG:场景图生成)
在这里插入图片描述
中心思想:p≈u-s-o

1.目标检测

2.视觉特征提取
出于对论文上下文的理解,我觉得这里的主客体特征应该融合了fasterrcnn提取的视觉特征和主客体的位置特征

3.谓语特征=union box特征-主语特征-宾语特征

4.谓语特征经过两层fc得到视觉模块的谓语类别的置信度
同时4’.谓语特征经过一层fc,主语和宾语分别做word embedding。

5.在三个连续的时间步内分别以主语特征、谓语特征、宾语特征为输入,得到它们的hidden state,再经过一层fc得到语言模块的谓语类别分数

6.最终三元组的分数:
在这里插入图片描述
zs,zo:主客体的置信度
zp:视觉模块的置信度
zl:语言模块的置信度

---------------------------一些碎碎念---------------------------
没啥说的了。
大道至简就完事了。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值