自监督
文章平均质量分 70
岳额不到五
这个作者很懒,什么都没留下…
展开
-
电影/video summarization
1.《2021-aaai-Movie Summarization via Sparse Graph Construction》 主要思想:利用电影的转折点,进行电影内容总结 步骤: 电影的每个scene代表图中的一个节点。首先构建全连接图,然后根据scene之间的相似性(公式1和公式3)(text相似性和audiovisual相似性,公式2),为每个节点动态挑选k个邻居节点。 将所有节点通过一层GCN 蒸馏学习。利用唯一有转折点标记的数据集TRIPOD,先获得一个概率分布q(yt|D),在用两个loss原创 2022-03-16 11:23:16 · 491 阅读 · 0 评论 -
多模态自监督 论文
多模态情感分析 多个任务,一个多模态任务和三个单模态任务。多模态任务监督学习,单模态任务自监督学习 主要创新点:前两条都是针对单模态学习任务的。大模型可能是参考文献Yu et al. (2020a), 参考的文章也是一个多模态和多个单模态组成的多任务学习模型,但都是监督学习。 提供了代码 ...原创 2021-05-08 15:31:40 · 1214 阅读 · 0 评论