Loss Function
文章平均质量分 95
IMU_YY
这个作者很懒,什么都没留下…
展开
-
对比学习(Contrastive Learning)中的损失函数
文章目录写在前面一、Info Noise-contrastive estimation(Info NCE)1.1 描述1.2 实现二、HCL2.1 描述2.2 实现三、文字解释四、代码解释4.1 Info NCE4.2 HCL写在前面 最近在基于对比学习做实验,github有许多实现,虽然直接套用即可,但是细看之下,损失函数部分甚是疑惑,故学习并记录于此。关于对比学习的内容网络上已经有很多内容了,因此不再赘述。本文重在对InfoNCE的两种实现方式的记录。一、Info Noise-contrasti原创 2021-02-16 14:30:20 · 43570 阅读 · 18 评论 -
[论文阅读] Universal Weighting Metric Learning for Cross-Modal Matching
文章目录写在前面的话1. Motivation2. Contribution3.Method3.1 Problem Statement3.2 Universal Weighting Framework for Cross-Modal Matching3.3 Informative Pairs Mining3.4 Polynomial Loss for Cross-Modal Matching3.4.1 Avg Polynomial Loss3.4.2 Max Polynomial Loss4.Experim原创 2021-01-13 09:58:17 · 720 阅读 · 0 评论