Pytorch模型的测试如何编写

📚博客主页:knighthood2001
公众号:认知up吧 (目前正在带领大家一起提升认知,感兴趣可以来围观一下)
🎃知识星球:【认知up吧|成长|副业】介绍
❤️如遇文章付费,可先看看我公众号中是否发布免费文章❤️
🙏笔者水平有限,欢迎各位大佬指点,相互学习进步!

模型测试,模型测试,首先就是需要模型,然后,需要数据才能进行测试。

def test_model_process(model, test_dataloader):
    # 设定测试所用到的设备,有GPU用GPU没有GPU用CPU
    device = "cuda" if torch.cuda.is_available() else 'cpu'

    # 讲模型放入到训练设备中
    model = model.to(device)

    # 初始化参数
    test_corrects = 0.0
    test_num = 0

    # 只进行前向传播计算,不计算梯度,从而节省内存,加快运行速度
    with torch.no_grad():
        for test_data_x, test_data_y in test_dataloader:
            # 将特征放入到测试设备中
            test_data_x = test_data_x.to(device)
            # 将标签放入到测试设备中
            test_data_y = test_data_y.to(device)
            # 设置模型为评估模式
            model.eval()
            # 前向传播过程,输入为测试数据集,输出为对每个样本的预测值
            output= model(test_data_x)
            # 查找每一行中最大值对应的行标
            pre_lab = torch.argmax(output, dim=1)
            # 如果预测正确,则准确度test_corrects加1
            test_corrects += torch.sum(pre_lab == test_data_y.data)
            # 将所有的测试样本进行累加
            test_num += test_data_x.size(0)

    # 计算测试准确率
    test_acc = test_corrects.double().item() / test_num
    print("测试的准确率为:", test_acc)

因此,定义了test_model_process(model, test_dataloader):函数,通过传入模型和数据集。这里内容和前面的差别在于没有了enumerate函数,

for test_data_x, test_data_y in test_dataloader:

在之前的例子中,在循环

for step, (b_x, b_y) in enumerate(train_dataloader):

enumerate 函数被用来同时获取数据加载器 train_dataloader 产生的每个批次(batch)的索引(step)和该批次的内容(b_x 和 b_y)。虽然在那个特定的代码段中,step 可能没有被直接使用.

因此,这里其实也可以用,也可以不用上面的表达。


此外,由于是测试,不涉及到反向传播,我们不需要计算梯度。把他关掉可以加快计算速度。

打印预测和真实标签

batch_size设置为1的好处,就在于可以直接打印预测值和真实值。

def print_test_model(model, test_dataloader):
    # 设定测试所用到的设备,有GPU用GPU没有GPU用CPU
    device = "cuda" if torch.cuda.is_available() else 'cpu'
    model = model.to(device)
    classes = ['猫', '狗']
    with torch.no_grad():
        for b_x, b_y in test_dataloader:
            b_x = b_x.to(device)
            b_y = b_y.to(device)

            # 设置模型为验证模型
            model.eval()
            output = model(b_x)
            pre_lab = torch.argmax(output, dim=1)
            result = pre_lab.item()
            label = b_y.item()
            print("预测值:", classes[result], "------", "真实值:", classes[label])

在以前的文章中,pre_lab和b_y都是包含批数数量的数据,比如16个数据。

现在由于批数变成1了,因此其里面都只有1个值。可以直接取出来进行对比。

全部代码

import torch
import torch.utils.data as Data
from torchvision import transforms
from model import GoogLeNet, Inception
from torchvision.datasets import ImageFolder
from PIL import Image

def test_data_process():
    # 定义数据集的路径
    ROOT_TRAIN = r'data\test'

    normalize = transforms.Normalize([0.162, 0.151, 0.138], [0.058, 0.052, 0.048])
    # 定义数据集处理方法变量
    test_transform = transforms.Compose([transforms.Resize((224, 224)), transforms.ToTensor(), normalize])
    # 加载数据集
    test_data = ImageFolder(ROOT_TRAIN, transform=test_transform)

    test_dataloader = Data.DataLoader(dataset=test_data,
                                      batch_size=1,
                                      shuffle=True,
                                      num_workers=0)
    return test_dataloader


def test_model_process(model, test_dataloader):
    # 设定测试所用到的设备,有GPU用GPU没有GPU用CPU
    device = "cuda" if torch.cuda.is_available() else 'cpu'

    # 讲模型放入到训练设备中
    model = model.to(device)

    # 初始化参数
    test_corrects = 0.0
    test_num = 0

    # 只进行前向传播计算,不计算梯度,从而节省内存,加快运行速度
    with torch.no_grad():
        for test_data_x, test_data_y in test_dataloader:
            # 将特征放入到测试设备中
            test_data_x = test_data_x.to(device)
            # 将标签放入到测试设备中
            test_data_y = test_data_y.to(device)
            # 设置模型为评估模式
            model.eval()
            # 前向传播过程,输入为测试数据集,输出为对每个样本的预测值
            output = model(test_data_x)
            # 查找每一行中最大值对应的行标
            pre_lab = torch.argmax(output, dim=1)
            # 如果预测正确,则准确度test_corrects加1
            test_corrects += torch.sum(pre_lab == test_data_y.data)
            # 将所有的测试样本进行累加
            test_num += test_data_x.size(0)

    # 计算测试准确率
    test_acc = test_corrects.double().item() / test_num
    print("测试的准确率为:", test_acc)

def print_test_model(model, test_dataloader):
    # 设定测试所用到的设备,有GPU用GPU没有GPU用CPU
    device = "cuda" if torch.cuda.is_available() else 'cpu'
    model = model.to(device)
    classes = ['猫', '狗']
    with torch.no_grad():
        for b_x, b_y in test_dataloader:
            b_x = b_x.to(device)
            b_y = b_y.to(device)

            # 设置模型为验证模型
            model.eval()
            output = model(b_x)
            pre_lab = torch.argmax(output, dim=1)
            result = pre_lab.item()
            label = b_y.item()
            print("预测值:", classes[result], "------", "真实值:", classes[label])


if __name__ == "__main__":
    # 加载模型
    model = GoogLeNet(Inception, in_channels=3, out_channels=2)
    model.load_state_dict(torch.load('best_model.pth'))

    # 利用现有的模型进行模型的测试
    test_dataloader = test_data_process()
    test_model_process(model, test_dataloader)
    # print_test_model()

最后

如果你从前面的文章,一直看过来,我相信,这里你也是一下就能理解的。

  • 2
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
Pytorch是一个基于Python的深度学习框架,而TensorFlow是由谷歌开发的另一个主要深度学习框架。尽管它们都具有相似的功能和应用领域,但它们的底层结构和语法有一些不同。 要将Pytorch模型转换为TensorFlow模型,需要进行以下步骤: 1. 确保数据预处理和模型的加载和保存方法与两个框架兼容。Pytorch使用torchvision库来加载和处理数据,而TensorFlow则使用tf.data.Dataset。可以编写一个通用的数据预处理函数,在转换过程中适应两个框架的要求。模型加载和保存方法也有所不同,因此需要检查和调整相应的代码。 2. 对于网络架构的转换,可以通过手动编写等效的TensorFlow代码来实现。首先,将Pytorch模型的输入、输出和中间层的形状记录下来。然后,将这些信息用于初始化TensorFlow模型,并按照相同的层次结构和参数进行转换。需要注意的是,Pytorch和TensorFlow的层名称和参数格式可能不同,因此需要进行一些调整。 3. 在模型转换过程中,还需要调整损失函数和优化器。Pytorch和TensorFlow使用不同的损失函数和优化器,因此需要将它们进行等效匹配或手动实现。可以将Pytorch的损失函数转换为TensorFlow的等效函数,并使用TensorFlow的优化器进行训练。 4. 进行模型的训练和测试,并根据需要进行微调和优化。在训练和测试过程中,可能需要进行调整以适应TensorFlow框架的要求,例如调整图像的通道顺序或输入的格式。 总的来说,将Pytorch模型转换为TensorFlow模型需要一些手动调整和修改,但可以通过适应两个框架的不同要求来实现。需要确保数据预处理、网络架构、损失函数和优化器等方面的兼容性,并在训练和测试过程中进行适当的调整和优化。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

knighthood2001

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值