Henry的博客

本文介绍了利用 Swin-Transformer 从网络自定义下载数据集到完整训练、预测的完整项目，操作简单，无需更改参数！

Transformer 是在自然语言处理(NLP)任务中提出的，之前的时序网络(RNN)不能并行化，计算N+1的数据，需要计算N的数据。因此，Transformer应运而生了。图像处理中，如果将图像划分为一个个patch，这样Transformer就能向处理自然语言那样处理图像CNN 网络有个关键的问题就是卷积核size 的设定，大的kernel size 可以拥有更好的感受野，把握更多图像的全局信息。但是size过大，网络的参数就会增加。

图像识别任务主要利用神经网络对图像进行特征提取，最后通过全连接层将特征和分类个数进行映射。传统的网络是利用线性网络对图像进行分类，然而图像信息是二维的，一般来说，图像像素点和周围邻域像素点相关。而线性分类网络将图像强行展平成一维，不仅仅忽略了图像的空间信息，而全连接层会大大增加网络的参数为了更好把握图像像素的空间信息，提出了 CNN 卷积神经网络，利用卷积核(滤波器)对图像进行窗口化类似处理，这样可以更好的把握图像的空间信息。这里定义两个名词：1. 空间信息是指图像的宽高。

本章利用reset34 作图像分类，包括计算训练集和测试集的loss、accuracy曲线，对训练好的网络在训练集+测试集上求混淆矩阵。

ConvNeXt 网络基于传统的卷积神经网络，与当下 transformer当道而言简直是一股清流ConvNeXt并没有特别复杂或者创新的结构ConvNeXt 网络有五种大小，可以参考下面。

我们提出了一种改进的渐进式学习方法:在早期训练阶段，我们用小图像大小和弱正则化(例如，dropout和数据增强)训练网络，然后我们逐渐增加图像大小并添加更强的正则化。建立在逐步调整大小的基础上,但通过动态调整正则化，我们的方法可以在不导致准确性下降的情况下加速训练。对于不同的图像大小保持相同的正则化并不理想:对于相同的网络，较小的图像大小导致较小的网络容量，因此需要弱正则化;反之亦然，较大的图像尺寸需要更强的正则化来对抗过拟合。个人觉得最重要的是渐进的学习方法吧，根据体系的尺寸动态的正则化。

EfficientNet 对网络的重要三个参数进行的探索：图像分辨率、网络的宽度、网络的深度如下： 不知道从什么时候开始，224*224的图像分辨率输入似乎成为了神经网络的输入标准，导致后来的网络几乎输入都是224*224的尺寸大小因此，在规定了分辨率的这一基础下，后面的网络都在width或者depth上面下功夫。例如resnet可以增加到1000层的深度下面简单说说三个参数的作用宽度：增加channel的数量 ,更广泛的网络往往能够捕获更细粒度的特征，并且更容易训练。然而，极宽但较浅的网络往往难以捕捉更高

shufflenet v2 论文中提出衡量轻量级网络的性能不能仅仅依靠FLOPs计算量，还应该多方面的考虑，例如MAC(memory access cost)，还应该比较在不同的硬件设备下的性能等等因此，基于多方面的考虑。shufflenet v2 通过大量的实验和测试总结了轻量化网络的四个准则，然后根据这四条准则搭建了shufflenet v2网络输入输出通道个数相同的时候，内存访问量MAC最小分组卷积的分组数过大会增加MAC碎片化操作会并行加速并不友好。

shufflenet的亮点：分组卷积 + 通道重排mobilenet 提出的深度可分离卷积分为两个step，第一步是深度卷积DW，也就是每一个channel都用一个单独的卷积核卷积，输出一张对应的特征图。第二步是点卷积PW，就是用1*1的卷积核对DW的结果进行通道融合这样的做法可以有效的减少计算量，然而这样的方式对性能是有一定影响的。而后面的mobilenet 2，3是在bottleneck里面扩充了维度或者更新了激活函数防止维度丢失等等。

MobileNet V3

MobileNet V2

MobileNet V1

resnet 迁移学习对CIFAR10 的分类

超深的网络结构，可以突破1000层提出residual 模块使用Batch Normalization 抑制过拟合，丢弃Dropout方法针对第一点，我们知道加深网络层对于提升网络性能至关重要。然而实际情况中，网络层的加深会导致学习无法进行，性能会更差。因为网络的深度会导致梯度消失或者梯度爆炸的问题因为层数的加深，反向传播的时候，更新权重w的时候，根据链式法则可能要乘上很多项。例如传过来的是个0.5，那么网络层数深就会导致 0.5 的n次方，从而导致梯度消失，网络无法学习。

引入了Inception 结构，在网络在横向上有深度，融合了不同尺度的特征信息使用了 1*1 的卷积核进行降维处理添加了两个辅助分类器帮助训练丢弃全连接层，使用平均池化层，大大减少了模型的参数下面是GoodLeNet 的网络结构图每层网络的参数为：后面的参数代表Inception 结构的配置。

VGG16 的网络结构如图：VGG 网络是由卷积层和池化层构成基础的CNN它的CONV卷积层的参数全部是由 stride = 1，padding = 1它的maxpool 最大池化层的参数都是 size = 2 ， stride = 2 组成的VGG 网络的亮点是它的卷积层全部都是由 3*3 的小型卷积核连续进行的，通过重复进行---卷积层重叠2-4次，然后再由池化层将size 减半进行处理VGG 网络提出了一个新的概念，就是通过叠加 3*3 的卷积核来替代大的卷积核。

目录1. 介绍2. 搭建AlexNet网络3. 准备数据集4. 训练网络5. 预测图片6. codeAlexNet 网络的结构为：卷积层的计算公式为： 通过计算，可以得到网络之间的参数为： 之前介绍过，卷积层相当于特征提取、全连接层相当于分类器所以这里分开搭建不同的模块特征提取的部分：分类的部分：前向传播的部分：打印的网络结构为： 这里对五个不同属性的花做分类，都放在了flower_data 下，分别是：雏菊、蒲公英、玫瑰、向日葵、郁金香通过split_data 文件对flower_data 划分出训练集和

LeNet 网络的结构如图：网络流通的顺序为：输入->卷积层1->激活函数->池化层->卷积层2->激活函数->池化层2->全连接层1->激活函数->全连接层2->激活函数->全连接层3->激活函数->softmax->输出10个类别的概率再看一下网络的维度：src 代表输入图像，dst代表输出图像，也可以计算对应的Height ， Widthf 代表卷积核的sizep 代表填充的个数s 代表卷积核的步幅池化层计算公式较为简单，这里用的是（2，2）大小的Max池化。

这次要完成的任务是搭建一个线性的模型去对手写数字集MNIST进行训练，对我们的网络在测试集上进行测试防止过拟合，最后在网上随便找一张手写数字的图片进行预测通过之前的学习，大概了解到，训练神经网络大概需要如下几个步骤1. 准备数据集 Data sets2. 搭建网络 Net + 优化器 optimizer3. 训练网络 Train4. 测试网络 Test这次的流程也是类似，但是因为这次的数据集和网络都较大，所以采用模块化的方式去实现。

首先第一层的时候，因为前八列作为我们的x_data ，也就是说我们输入的特征是 8 维度的，那么由于 y = x * wT + b ，因为输入数据的x是(n * 8) 的，而我们定义的y维度是(n * 6) ，所以wT的维度应该是(8,6)这里不需要知道啥时候转置，啥时候不转置之类的，只要满足线性的方程y = w*x+b，并且维度一致就行了。将前八列的特征放到我们的x_data里面，作为特征输入，最后一列放到y_data作为label。接下来，搭建实例化我们的网络，然后建立优化器。先来看看我们的数据集。