深度学习框架下数据处理部分的经验总结:
1、数据读取
2、划分数据集(训练集、测试集、验证集)
3、打乱数据顺序(由于深度学习网络框架对于后输入的数据记忆深刻,对参数影响较大,所以需要打乱,通用函数为shuffle)
4、构建数据读取器
5、数据校验(机器校验及人工校验)
深度学习框架下数据处理部分的经验总结:
1、数据读取
2、划分数据集(训练集、测试集、验证集)
3、打乱数据顺序(由于深度学习网络框架对于后输入的数据记忆深刻,对参数影响较大,所以需要打乱,通用函数为shuffle)
4、构建数据读取器
5、数据校验(机器校验及人工校验)