看了一下刘二大人保姆级Pytorch教程,就先写个笔记记录一下,感兴趣的客官可以去B站看一下哦
教程地址:https://www.bilibili.com/video/BV1Y7411d7Ys?p=8
首先,区分一下Batch、Epoch 和 Iteration三个概念
Epoch:表示所有训练样本在神经网络中都 进行了一次正向传播 和一次反向传播 ,简单地说就是一个Epoch就是将所有训练样本训练一次的过程
Batch-size:当一个Epoch的样本(也就是所有的训练样本)数量可能太过庞大(对于计算机而言),就需要把它分成多个小块,也就是就是分成多个Batch 来进行训练。
batch-size就表示每次训练时所用到的样本数量
Iterations:训练一个Batch就是一次Iteration,加入一共有10,000个样本数,设置banchsize=1000,那么iteration=10,类似于迭代器的感觉。
这里如果还没有很明白的话可以去看:https://www.jianshu.com/p/22c50ded4cf7大大解释得还是很明白的~