图文匹配
文章平均质量分 75
梦想天空分外蓝-
这个作者很懒,什么都没留下…
展开
-
《Step-Wise Hierarchical Alignment Network for Image-Text Matching》论文详细梳理
论文《Step-Wise Hierarchical Alignment Network for Image-Text Matching》。以前大多数的图文匹配方法很少关注图像和文本中的上下文信息,缺乏了多层次信息,导致匹配错误。而作者提出的方法可以很好的利用上下文信息解决语义内容相似但上下文信息略有不同的错误匹配。提出了一种分步分层对齐网络(SHAN),该网络通过逐步执行三个对齐步骤来推理图像文本对的相关性。原创 2022-11-21 11:42:51 · 500 阅读 · 0 评论 -
Expressing Objects Just Like Words:Recurrent Visual Embedding for Image-Text Matching(论文详细梳理)
DP-RNN首先通过text encoder and image encoder 提取单词特征和原始图像特征,之后,在对图像的对象重新排序后,我们将对象特征以与单词特征相同的方式馈送到另一个双向GRU层,提取新的对象特征。特别是,给定一个输入Image-Text pair,作者提出的模型能够根据 Image object 在Text 中最相关的单词的位置对图像对象重新排序,并由RNN编码。用Faster R-CNN来提出显著区域,将每个突出区域视为一个对象,对于图像I,我们提取一组对象{O1,O2,…原创 2022-11-06 22:22:45 · 746 阅读 · 1 评论