2021-04-06

torchtext.data

首先先建立field对象
通过field对象建立语料库的example对象，每一个example对象都是一个数据的实例，之后建立vocab字典,用数字代表语料库中的文字，每一个example对象都用语料库中的数字表示成向量，最后建立iter，每一个batch里包含batch_size大小的example对象，for循环则可以遍历每个batch，得到每个batch的数据。