mmmalb笔记二 6.5

课程介绍了MMpretrain框架,它提供现成的模型和数据集,允许通过API直接调用。重点讲述了如何使用和编写配置文件,避免手动构建模型。此外,还讨论了注意力机制的概念,强调当前部分与历史所有信息的相关性。PPT通过直观方式展示了注意力机制和图像特征的关联。最后,简要概述了CLIP的工作原理,预告了后续的实践操作环节。
摘要由CSDN通过智能技术生成

本小节课程是有关MMpretrain的介绍,MMpretrain提供了很多模型以及数据集,可以直接利用其中的API接口去进行调用,省去了自己构建模型的时间。

在这里插入图片描述
之后又介绍了配置文件相关的内容,之前我自己也是很笨的跟着AlexNet、VGG去一个卷积核一个卷积地搭建,之后也要逐步熟悉如何使用、编写config文件。
在这里插入图片描述
传统的操作方式:
在这里插入图片描述
利用配置文件的方式:
在这里插入图片描述
注意力机制的讲解,我的理解就是当前的部分不只是与前一个部分有关,而是与之前发生过的所有部分都相关。
在这里插入图片描述

我很喜欢这页PPT,他把注意力机制直观形象地表达了出来,尤其是右侧的图像特征,与目标相关性大的对应的权重就越大,颜色也越深。
在这里插入图片描述
在这里插入图片描述

下面这页PPT也很好的描述了CLIP的工作方式。
在这里插入图片描述
这次只是一个笼统的概括,期待之后的上手实操。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

我们不会分开的对吧

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值