Pytorch版本朴素贝叶斯分类器在MNIST手写数据集上的实现

Pytorch版本朴素贝叶斯分类器在MNIST手写数据集上的实现

——————————————————————————————————————

一、贝叶斯公式:

p ( x 2 ∣ x 1 ) = p ( x 1 ∣ x 2 ) p ( x 2 ) p ( x 1 ) p\left(x_{2} \mid x_{1}\right)=\frac{p\left(x_{1} \mid x_{2}\right) p\left(x_{2}\right)}{p\left(x_{1}\right)} p(x2x1)=p(x1)p(x1x2)p(x2)

计算 后验概率 p ( x 2 ∣ x 1 ) p\left(x_{2} \mid x_{1}\right) p(x2x1), 需要知道条件概率 p ( x 1 ∣ x 2 ) p\left(x_{1} \mid x_{2}\right) p(x1x2) 以及先验概率 p ( x 2 ) p\left(x_{2}\right) p(x2).

——————————————————————————————————————

二、MNIST数据集

MNIST手写体数字数据集包含两个部分,含有 60000 张图片的训练集和含有 10000 张图片的测试集,每张图片都是由值在 0~255 之间的像素点构成的图片,大小为 28*28,如下图所示:
在这里插入图片描述

为了方便起见,之后我们会把这样的 28 ∗ 28 28*28 2828 的图片统一表示一维向量 :
( x 1 , x 2 … x l ) , l = 784 \left(x_{1}, x_{2} \ldots x_{l}\right),l=784 (x1,x2xl)l=784
——————————————————————————————————————

三、思路

分类任务的核心就是任意给出一张图片,让分类器去预测这张图片最有可能的标签 y, 即:

arg max ⁡ y P ( y ∣ p i c t u r e ) \argmax _{y} P\left( y\mid picture\right) yargmaxP(ypicture)

写具体一点呢,变成下面的样子:

arg max ⁡ y P ( y ∣ x 1 , x 2 , x 3 … … x l ) \argmax _{y} P\left(y \mid x_{1}, x_{2}, x_{3} \ldots \ldots x_{l}\right) yargmaxP(yx1,x2,x

  • 14
    点赞
  • 22
    收藏
    觉得还不错? 一键收藏
  • 5
    评论
好的,关于softmax回归在PyTorch中的实现,针对FashionMNIST数据集的话,可以按照以下步骤进行。 首先,需要引入相应的包: ``` import torch import torchvision from torch.utils.data import DataLoader import torch.nn.functional as F ``` 然后,准备数据集: ``` # 准备训练集和测试集 train_dataset = torchvision.datasets.FashionMNIST(root='./data/FashionMNIST', train=True, transform=torchvision.transforms.ToTensor(), download=True) test_dataset = torchvision.datasets.FashionMNIST(root='./data/FashionMNIST', train=False, transform=torchvision.transforms.ToTensor(), download=True) # 定义数据加载器 train_loader = DataLoader(dataset=train_dataset, batch_size=64, shuffle=True) test_loader = DataLoader(dataset=test_dataset, batch_size=64, shuffle=False) ``` 接下来,定义模型: ``` # 定义模型 class SoftmaxRegression(torch.nn.Module): def __init__(self): super(SoftmaxRegression, self).__init__() self.linear = torch.nn.Linear(784, 10) def forward(self, x): x = x.reshape(x.shape[0], -1) logits = self.linear(x) return logits ``` 然后,定义优化器和损失函数: ``` # 定义优化器和损失函数 model = SoftmaxRegression() optimizer = torch.optim.SGD(model.parameters(), lr=0.1) criterion = torch.nn.CrossEntropyLoss() ``` 接着,进行模型训练: ``` # 模型训练 num_epochs = 10 for epoch in range(num_epochs): for i, (images, labels) in enumerate(train_loader): # 前向传播及计算损失 outputs = model(images) loss = criterion(outputs, labels) # 反向传播及优化 optimizer.zero_grad() loss.backward() optimizer.step() if (i+1) % 100 == 0: print("Epoch [{}/{}], Step [{}/{}], Loss: {:.4f}".format(epoch+1, num_epochs, i+1, len(train_loader), loss.item())) ``` 最后,进行模型测试: ``` # 模型测试 with torch.no_grad(): correct = 0 total = 0 for images, labels in test_loader: outputs = model(images) _, predicted = torch.max(outputs.data, 1) total += labels.size(0) correct += (predicted == labels).sum().item() print('Accuracy of the model on the 10000 test images: {} %'.format(100 * correct / total)) ``` 这样,就可以在PyTorch实现softmax回归,利用FashionMNIST数据集进行模型训练和测试了。
评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值