动手学深度学习(PyTorch)代码笔记
记录pytorch用于深度学习的学习过程。
二、深度学习基础
1、线性回归
线性回归和softmax回归都是单层神经网络,用于解决回归问题。
(1)基本要素
1、模型定义
y ^ = x 1 w 1 + x 2 w 2 + b \hat y = x_1w_1 + x_2w_2 + b y^=x1w1+x2w2+b
2、模型训练
(1)训练数据
(2)损失函数
L = 1 n ∑ 1 2 ( y ^ ( i ) − y ( i ) ) 2 L = \frac 1 n\sum\frac 1 2(\hat y^{(i)} - y^{(i)})^2 L=n1∑21(y^(i)−y(i))