深度学习记录

1.数据集

        通常把数据集划分为三部分，分别是训练集、验证集和测试集，其中验证集用于调参并防止信息泄露，这里说的信息泄露是指如果用测试集调参就有可能会使模型更适合这个测试集，但实际模型并不会变更好，测试集在这里模拟实际情况，仅在模型训练完毕情况下进行最终的一次测试，看模型实际效果。

2.模型保存

        模型保存的是w和b

3.激活函数作用

        激活函数是用来加入非线性因素的，提高神经网络对模型的表达能力，解决线性模型所不能解决的问题。