【一起深度学习——NIN】

本文详细介绍了NIN神经网络的工作原理,包括其模块化设计中的卷积层结构,以及如何在Fashion-MNIST数据集上进行训练和应用。代码展示了如何构建并训练一个具有NIN块的网络模型,最后展示了训练结果。
摘要由CSDN通过智能技术生成

原理图:

请添加图片描述

代码实现:

import torch
from torch import nn
from d2l import torch as d2l

def nin_block(in_channels, out_channels, kernel_size, strides, padding):
    return nn.Sequential(
        #模块化设计思想,方便重复使用。
        #经过一个卷积层,再加两个1*1的卷积层。起到全连接层的作用。
        nn.Conv2d(in_channels,out_channels,kernel_size,strides,padding),
        nn.ReLU(),
        # 两个1*1的卷积层,并不会改变形状,不改变通道数
        nn.Conv2d(out_channels, out_channels, kernel_size=1, stride=1),
        nn.ReLU(),
        nn.Conv2d(out_channels,out_channels,kernel_size=1,stride=1),
        nn.ReLU(),
    )

#nn.Sequential 容器
net = nn.Sequential(
    nin_block(1,96,kernel_size=11,strides=4,padding=0),
    nn.MaxPool2d(kernel_size=3,stride=2),
    nin_block(96,256,kernel_size=5,strides=1,padding=2),
    nn.MaxPool2d(kernel_size=3,stride=2),
    nin_block(256,384,kernel_size=3,strides=1,padding=1),
    nn.MaxPool2d(kernel_size=3,stride=2),
    nn.Dropout(0.5),
    # [1,10,5,5]
    nin_block(384, 10, kernel_size=3, strides=1, padding=1),
    #自适应平均池化。与普通的池化层不同,允许指定输出特征图的大小而不是池化层的大小。
    #[1,10,5,5] => [1,10,1,1]
    nn.AdaptiveAvgPool2d(output_size=(1,1)),
    # [1,10,1,1] =>[1,10*1*1] =>[1,10]
    nn.Flatten()
)

#开始训练
lr, num_epochs, batch_size = 0.1, 10, 128
train_iter, test_iter = d2l.load_data_fashion_mnist(batch_size, resize=224)
d2l.train_ch6(net, train_iter, test_iter, num_epochs, lr, d2l.try_gpu())

输出结果:

请添加图片描述
请添加图片描述

  • 5
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值