问答模型(三)——数据预处理时的bug们

• bug1

自己编写的read数据方法使用loaddatasets方法后得到的单条数据类型为Tuple，而预加载的单条数据类型为Dict
因此将数据集全部转为Dict

train_ds = dict(train_ds)

这样将迎来了第二个bug

• bug2

预加载的数据集可以使用xxx[-1]访问到最后一条数据，而本地加载的数据集智能用xxx[len(xxx) - 1]访问到最后一条数据。发现本地加载的数据集是通过每条数据自带的index列对数据进行索引访问，而预加载的数据集index是不包含在数据中的。因此将tuple的每一组单独转diction

diction = []

for idx in range(len