深度学习——线性神经网络:线性回归

这篇博客介绍了如何从头实现线性回归模型,并在PyTorch框架中进行训练。首先,通过生成数据集来演示线性回归的原理,然后分别展示了手动实现和使用PyTorch框架的线性回归模型训练过程,包括批量读取数据、初始化参数、定义模型、损失函数和优化算法。最终,模型在训练数据上的损失逐渐减小,接近真实参数的估计误差也极小,验证了模型的有效性。
摘要由CSDN通过智能技术生成


一. 生成数据集

我们使用线性模型参数 w=[2,−3.4]⊤ 、 b=4.2 和噪声项 ϵ 生成数据集及其标签:

y = X w + b + ϵ \mathbf{y}=\mathbf{X} \mathbf{w}+b+\epsilon y=Xw+b+ϵ
在这里我们认为标准假设成立,即 ϵ 服从均值为0的正态分布。 为了简化问题,我们将标准差设为0.01。下面的代码生成合成数据集。

def synthetic_data(w, b, num_examples):  #@save
    """生成 y = Xw + b + 噪声。"""
    X = torch.normal(0, 1, (num_examples, len(w)))
    y = torch.matmul(X, w) + b
    y += torch.normal(0, 0.01, y.shape)
    return X, y.reshape((-1, 1))

true_w = torch.tensor([2, -3.4])
true_b = 4.2
features, labels = synthetic_data(true_w, true_b, 1000)

features中的每一行都包含一个二维数据样本,labels中的每一行都包含一维标签值(一个标量)。

通过生成第二个特征features[:, 1]和labels的散点图,可以直观地观察到两者之间的线性关系。

xx = np.zeros(1000)
yy = np.zeros(1000)
for i in
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

平什么阿

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值