- 博客(4)
- 收藏
- 关注
原创 论文笔记:Meta-attention for ViT-backed Continual Learning CVPR 2022
这篇论文思想非常的新颖,其首次将增量学习(也叫终身学习)和 Vision transformer 结合在一起,想借助VIT的高性能来增强增量学习的准确度。其结合方法是加mask,这有点像PackNetPackNetPackNet,其中作者还利用 Gumbel-max 重参数化技巧来训练mask,这一点让我非常迷惑且难受。.........
2022-07-03 19:50:20 1451 3
原创 学习笔记·GNN & GCN
对于初学者来说,GNN还是好理解的,但是对于GCN来说,我刚开始根本不理解其中的卷积从何而来!! 这篇博文分为两部分,第一部分是我对GNN的理解,第二部分是我个人对GCN中卷积的理解。
2022-06-20 18:05:43 721
原创 论文笔记:HyperNetworks(arXiv版本)
这篇博文是有关HyperNetworks arXiv版本的笔记,为啥选择arXiv版本呢,因为ICLR官方编辑版本有许多删减,致使我有一部分公式看不懂😭(可能是因为我个人才疏学浅吧)。 这篇博文主要是讲HyperNetworks的方法,不会对实验进行介绍。...
2022-06-16 15:55:35 2393
原创 理解论文笔记 iCaRL: Incremental Classifier and Representation Learning
icarl 这篇论文以算法伪代码的形式来展示作者的想法,对于我来说有点难理解,所以做个笔记。这篇博客只对方法进行分析(第二节就讲方法, 我很少见这种论文格式,一般第二节)
2022-06-10 12:22:06 2214
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人