多模态
文章平均质量分 74
多模态
~拾捌~
这个作者很懒,什么都没留下…
展开
-
Multimodal Object Detection via Probabilistic Ensembling——基于概率集成实现多模态目标检测
ECCV2022 | 多模态融合检测新范式!基于概率集成实现多模态目标检测github代码原创 2023-05-11 09:39:58 · 447 阅读 · 0 评论 -
论文翻译——Multi-modal Self-Supervision from Generalized Data Transformations(多模态自监督)
自监督学习最近的成功在很大程度上可以归功于内容保持变换,它可以用来容易地导出不变量。虽然转换在对比损失训练中生成正样本对,但最近的工作侧重于开发新的客观公式,而对转换本身的关注相对较少。在本文中,我们引入了广义数据变换的框架,以(1)将最近的几个自监督学习目标简化为一个单一的公式,便于比较、分析和扩展;(2)允许在数据变换不变或不同之间进行选择,获得不同的监督信号,以及(3)推导出转换的组合必须遵守的条件,以便实现适当的学习目标。该框架允许将不变性和独特性同时注入表示中,并使我们能够系统地探索新的对比目标。原创 2023-05-20 18:00:34 · 177 阅读 · 0 评论 -
论文翻译——On Compositions of Transformations in Contrastive Self-Supervised Learning(多模态自监督)
在图像域中,可以通过噪声对比学习诱导内容保持变换的不变性来学习优秀的表示。在本文中,我们将对比学习推广到更广泛的一组变换及其组成,以寻求不变性或独特性。我们表明,目前尚不清楚如何扩展SimCLR等现有方法。相反,我们引入了一些所有对比公式都必须满足的形式要求,并提出了一种满足这些要求的实用构造。为了最大限度地扩大这种分析的范围,我们将噪声对比公式的所有组成部分表示为数据的某些广义变换(GDT)的选择,包括数据采样。原创 2023-05-22 10:56:51 · 73 阅读 · 0 评论