利用torchvision.models调用现成的网络

现成的网络结构主要包括以下几种:

  • AlexNet
  • VGG
  • ResNet
  • SqueezeNet
  • DenseNet
  • Inception v3
  • GoogLeNet
  • ShuffleNet v2
  • MobileNet v2
  • ResNeXt
  • Wide ResNet
  • MNASNet

以resnet50为例,其最简单的调用方式就是:↓

model=torchvision.models.resnet50()

不需要初始化什么参数,这样得到的model就是默认的resnet50结构,可以直接用来做分类训练。

但是还提供了预训练参数权重,只需要:↓

model=torchvision.models.resnet50(pretrained=True)

这种方式会直接从官网上进行预训练权重的下载,该预训练权重是由ImageNet-1K(标准输入224x224)而来,由于其本质是一个分类网络,所以最后的全连接层大小为1000.

但是这种方式会被警告,因为pretrained参数可能以后会被舍弃,建议我们使用weight参数。
这样的话我们有两种方法

第一可以直接通过官网先把预训练权重下载好:↓

model=models.resnet50()
weight=torch.load("resnet50.pth")
model.load_state_dict(weight)

第二利用网络的weights参数:↓

from torchvision.models import resnet50,ResNet50_Weights

model=resnet50(weights=ResNet50_Weights.DEFAULT)

导入的ResNet50_Weights其实也不是现成的参数,它里面实际就是预训练权重的地址,它也是现下载的。不管是哪种现成网路的权重,一般在里面都配套了两套权重,一套是论文里面原汁原味的权重,一套是经过一些小技巧,在不改变网络结构的前提下进行改进的一套权重,而DEFAULT(默认值)就选择的是高性能的那一套:

model_1=resnet50(weights=ResNet50_Weights.IMAGENET1K_V1)

model_2=resnet50(weights=ResNet50_Weights.IMAGENET1K_V2)

其中ResNet50_Weights.DEFAULT就是ResNet50_Weights.IMAGENET1K_V2

如果我们想要直接使用现成的网络,不管是分类网络也好,目标检测网络,语义分割网络,还需要注意的就是预处理的步骤,即需要将检测的图片转化成网络训练是输入的格式,这个步骤也在ResNet50_Weights中:↓

weights=ResNet50_Weights.DEFAULT

preprocess=weight.transforms()

batch=preprocess(img).unsequeeze(0)

最后将结果映射回来即可:↓

prediction = model(batch).squeeze(0).softmax(0)
class_id = prediction.argmax().item()
score = prediction[class_id].item()
category_name = weights.meta["categories"][class_id]

其他网络的具体操作可以查看利用torch.models实现分类,目标检测,语义分割任务
但是的但是,我们基本不会使用原始的网络来进行分类,一般使用该网络进行特征的提取,换句话说它的分类层对于我们的用处不大。那么下面分为两种情况来介绍如何改造现成的网络:

将resnet50改造为其他分类网络

如果我们只想要训练分类层,那么先直接冻结网络里面所有的权重:↓

resnet50=models.resnet50(pretrained=True)

for param in resnet50.parameters():
	param.requires_grad=False

当我们直接print出resnet50的网络结构以后,最后几行是这样的↓

  (avgpool): AdaptiveAvgPool2d(output_size=(1, 1))
  (fc): Linear(in_features=2048, out_features=1000, bias=True)

这里面的fc就是我们需要更改的全连接层,其中fc其实就是全连接层名称,也可以认为是一个初始化变量,所以我们只需要改变这个初始化变量就可以了:↓

num_features=resnet50.fc.in_features

resnet50.fc=nn.Linear(num_features,10)#假设我们只需要分类10类

也可以再添加一层softmax,写成:↓

resnet50.fc=nn.Sequential(nn.Linear(num_features,10),
						  nn.LogSoftmax(dim=1))

使用resnet50部分结构组成下游网络的backbone(重点)

model=resnet50(weights=ResNet50_Weights.IMAGENET1K_V2)

feature_maps=nn.Sequential(*list(model.children())[:7])

imgs=torch.randn([2,3,224,224])

output=feature_maps(imgs)

就这么简单。

首先model.children()是一个很好用的接口,其只会将model的最外层结构分别输出,resnet50最外层一共有10个模块,我这里只去了前面7个,取出来以后利用nn.Sequential进行连接,就可以只使用其中某部分的结构了,具体可以参考
迁移学习

  • 4
    点赞
  • 19
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
### 回答1: torchvision.models.detection是PyTorch中的一个模块,用于实现目标检测任务。它提供了一系列预训练的模型,包括Faster R-CNN、Mask R-CNN、RetinaNet等,可以用于检测图像中的物体,并输出它们的位置、类别等信息。此外,该模块还提供了一些常用的数据增强方法,如随机裁剪、随机翻转等,可以用于增强训练数据集。 ### 回答2: torchvision.models.detection是一个PyTorch框架中的模型库,用于目标检测任务。它是基于深度学习的图像分析方法,旨在自动识别图像中的目标物体或特定区域。 该库提供了许多流行的目标检测模型,包括Faster R-CNN、Mask R-CNN、RetinaNet等。这些模型都是经过预训练的,可以直接用于目标检测任务,也可以通过微调来适应自定义数据集。 torchvision.models.detection库不仅仅提供了预训练的模型,还提供了用于数据预处理、后处理和评估的函数。这些函数包括图像变换、边界框处理、非极大值抑制等。 使用torchvision.models.detection进行目标检测的主要步骤包括: 1. 加载预训练模型:通过torchvision.models.detection提供的函数加载一个预训练的目标检测模型。 2. 数据预处理:使用torchvision.transforms提供的函数对输入的图像进行预处理,例如归一化、缩放等操作。 3. 运行推理:将预处理后的图像输入到加载的模型中,进行推理得到目标物体的边界框、类别和得分等信息。 4. 后处理:根据需要,进行后处理操作,例如非极大值抑制来去除重叠的边界框,并选择置信度最高的边界框。 5. 可视化:将目标物体的边界框和类别信息添加到原始图像上,以可视化的方式展示检测结果。 总之,torchvision.models.detection提供了一个方便易用的目标检测模型库,可以帮助开发者快速构建和训练自己的目标检测模型,实现图像中的目标物体识别和定位。 ### 回答3: torchvision.models.detection是PyTorch中的一个模块,主要用于目标检测任务。目标检测计算机视觉中的重要任务,旨在识别图像或视频中的不同目标并对其进行定位和分类。 torchvision.models.detection提供了许多已经预训练好的目标检测模型,包括Faster R-CNN、Mask R-CNN和Keypoint R-CNN等。这些模型都是基于深度学习的方法,使用卷积神经网络(CNN)来提取图像特征,并通过回归或分类器来确定目标的位置和类别。 使用torchvision.models.detection时,我们可以加载预训练模型并将其应用于新的图像或视频数据。首先,我们需要使用torchvision.transforms对输入数据进行预处理,例如调整大小、归一化或数据增强等。然后,通过调用detection模型,我们可以获得检测结果,包括检测到的目标的边界框、类别和置信度分数。 除了预训练模型,torchvision.models.detection还提供了许多辅助函数和工具,用于数据加载、训练和评估。例如,它包含了用于数据集处理和加载的类,如COCO、PASCAL VOC和Cityscapes等。此外,还提供了评估指标和可视化工具,可以帮助我们分析和理解模型的性能和输出结果。 总而言之,torchvision.models.detection为目标检测任务提供了方便易用的深度学习模型和工具。通过加载预训练模型并结合提供的辅助函数和工具,我们可以快速构建和训练自己的目标检测模型,或者将其应用于实际应用中。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值