pytorch神经网络训练(VGG-16)

VGG-16

  1. 导包
import torch

import torch.nn as nn

import torch.optim as optim

import torchvision

from torchvision import datasets, transforms

from torch.utils.data import DataLoader

import matplotlib.pyplot as plt
  1. 数据预处理和增强
transform = transforms.Compose([

transforms.Resize((224, 224)), 

调整图像大小为 224x224像素,符合VGG16输入

    transforms.ToTensor(),

transforms.Normalize(mean=[0.485, 0.456, 0.406], std=[0.229, 0.224, 0.225]), 

])

使用ImageNet的标准化参数

  1. 加载数据集
data_path = "D:\\图像处理、深度学习\\flowers"

dataset = datasets.ImageFolder(data_path, transform=transform)
  1. 划分训练集和测试集
train_size = int(0.8 * len(dataset))

test_size = len(dataset) - train_size

train_dataset, test_dataset = torch.utils.data.random_split(dataset, [train_size, test_size])
  1. 创建数据加载器
train_loader = DataLoader(train_dataset, batch_size=32, shuffle=True)

test_loader = DataLoader(test_dataset, batch_size=32, shuffle=False)
  1. 使用预训练的VGG16模型
model = torchvision.models.vgg16(pretrained=True)
  1. 修改全连接层以适应新的分类任务
num_classes = len(dataset.classes)

model.classifier[6] = nn.Linear(4096, num_classes)
  1. 定义损失函数和优化器
criterion = nn.CrossEntropyLoss()

optimizer = optim.Adam(model.parameters())
  1. 将模型移动到GPU(如果可用)
device = torch.device("cuda" if torch.cuda.is_available() else "cpu")

model.to(device)
  1. 初始化列表来存储每个epoch的损失和准确率
train_losses = []

train_accuracies = []

  1. 训练模型
num_epochs = 30 

定义训练的轮数为30轮

for epoch in range(num_epochs): 

    model.train() 

    running_loss = 0.0  

    correct = 0 

total = 0 

开始训练循环,将模型设置为训练模式初始化累计损失为0.0,初始化正确预测的数量为0,初始化总样本数量为0

for inputs, labels in train_loader: 

遍历训练数据加载器中的每个批次

        inputs, labels = inputs.to(device), labels.to(device) 

        optimizer.zero_grad() 

将输入和标签移动到定义的设备上(如GPU),清空模型的梯度

        outputs = model(inputs) 

        loss = criterion(outputs, labels) 

将输入传递给模型以获得输出,计算输出和标签之间的损失

        loss.backward() 

        optimizer.step() 

        running_loss += loss.item() 

反向传播损失以计算梯度,更新模型的参数,累计批次损失

        _, predicted = torch.max(outputs.data, 1) 

获取每个样本的最高预测值

        total += labels.size(0) 

        correct += (predicted == labels).sum().item() 

累计总样本数量,累计正确预测的样本数量

epoch_loss = running_loss / len(train_loader) 

计算平均损失

epoch_accuracy = 100 * correct / total 

计算准确率

train_losses.append(epoch_loss) 

train_accuracies.append(epoch_accuracy) 

将损失添加到训练损失列表中,将准确率添加到训练准确率列表中

print(f'Epoch {epoch + 1}/{num_epochs}, Loss: {epoch_loss}, Accuracy: {epoch_accuracy}%') 

打印轮数、损失和准确率

  • 6
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
VGG-16是一种卷积神经网络模型,已被证明是一种有效的图像识别和分类工具。VGG-16主要由卷积层和全连接层组成,整个网络被分成13个卷积层和3个全连接层。这些层是根据其宽度和深度来命名的。在PyTorch中实现VGG-16,我们可以使用torchvision中提供的预训练模型。以下是一些实现中的注释: ``` import torch.nn as nn import torchvision.models as models # 使用VGG-16训练模型 vgg16 = models.vgg16(pretrained=True) # 原始VGG-16模型已经训练好了,我们需要冻结其权重, # 这样它的权重在训练新任务时就不会被更新了 for param in vgg16.parameters(): param.requires_grad = False # 替换最后一层的全连接层 num_features = vgg16.classifier[6].in_features features = list(vgg16.classifier.children())[:-1] # 去掉最后一个全连接层 features.extend([nn.Linear(num_features, 10)]) # 添加一个新的全连接层,输出10个类别 vgg16.classifier = nn.Sequential(*features) # 在PyTorch中定义反向传播优化器和损失函数 criterion = nn.CrossEntropyLoss() optimizer = torch.optim.SGD(vgg16.parameters(), lr=0.001, momentum=0.9) # 训练模型 for epoch in range(10): # 训练10个epoch for i, (inputs, labels) in enumerate(trainloader, 0): # 输入数据 inputs, labels = inputs.to(device), labels.to(device) # 前向传播 outputs = vgg16(inputs) loss = criterion(outputs, labels) # 反向传播和优化 optimizer.zero_grad() loss.backward() optimizer.step() # 每1000批输出一次状态 if i % 1000 == 999: print('[%d, %5d] loss: %.3f' % (epoch + 1, i + 1, loss.item() / 1000.0)) running_loss = 0.0 ``` 注释中解释了如何在PyTorch中实现VGG-16模型、如何替换最后一层的全连接层、如何定义反向传播优化器和损失函数,以及如何进行训练。其中,loss.backward()用于计算梯度,optimizer.step()用于更新权重。通过这些操作,我们可以训练一个新的神经网络模型,用于分类具有10个类别的图像。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值