[Pytorch] 学习记录(六)处理多维特征输入

在之前的章节中一直在进行单维的特征输入 ,本节将进行多维特征输入的学习。图1为数据集样例,该数据集是关于糖尿病的数据集。

 

图1 数据集样例

我们将进行糖尿病的分类任务,每一行为一个样本Sample,每一列称为一个特征Feature。显然,每个样本拥有8个特征。由于特征的增加,在计算logistic模型的时候就不能再按照先前的一维计算,公式如下所示:

\hat{y}^{(i)}=\sigma(\sum_{n=1}^{8}x_{n}^{(i)}\cdot \omega_n+b)

公式中,需要将每个x的特征值取出,与ω相乘。在这里我们将xn看作一个向量,就相当于做如下的运算:

\begin{bmatrix} \omega_1&...& \omega_8 \end{bmatrix} \cdot \begin{bmatrix} x_1\\ ...\\ x_8\\ \end{bmatrix}

其与单维的区别在于ω不再只是一个数字,而是变成了有多个特征的向量,换言之就是ω不再唯一。而在代码上,我们只需要做一处修改:将原先的linear(1, 1)改为8, 1即可。前一个数字是输入的维度,后一个是输出的维度

图2 代码修改处

本次预测的为糖尿病模型,根据8个数据特征来判断未来的病情是否会恶化。在__init__中建立模型的时候,需要建立三个模型,目的是将8维数据降维,每次降两维(8→6,6→4,4→1)。建完之后调用self.sigmoid = torch.nn.Sigmoid(),然后是计算的过程。这里为了防止出错,只采用了一个x变量。

 完整代码如下:

import numpy as np
import torch
import matplotlib.pyplot as plt
 
# prepare dataset
xy = np.loadtxt('diabetes.csv', delimiter=',', dtype=np.float32)
x_data = torch.from_numpy(xy[:, :-1]) # 第一个‘:’是指读取所有行,第二个‘:’是指从第一列开始,最后一列不要
y_data = torch.from_numpy(xy[:, [-1]]) # [-1] 最后得到的是个矩阵
 
# design model using class
 
 
class Model(torch.nn.Module):
    def __init__(self):
        super(Model, self).__init__()
        self.linear1 = torch.nn.Linear(8, 6) # 输入数据x的特征是8维,x有8个特征
        self.linear2 = torch.nn.Linear(6, 4)
        self.linear3 = torch.nn.Linear(4, 1)
        self.sigmoid = torch.nn.Sigmoid() # 将其看作是网络的一层,而不是简单的函数使用
 
    def forward(self, x):
        x = self.sigmoid(self.linear1(x))
        x = self.sigmoid(self.linear2(x))
        x = self.sigmoid(self.linear3(x)) # y hat
        return x
 
 
model = Model()
 
# construct loss and optimizer
# criterion = torch.nn.BCELoss(size_average = True)
criterion = torch.nn.BCELoss(reduction='mean')  
optimizer = torch.optim.SGD(model.parameters(), lr=0.1)
 
epoch_list = []
loss_list = []
# training cycle forward, backward, update
for epoch in range(100):
    y_pred = model(x_data)
    loss = criterion(y_pred, y_data)
    print(epoch, loss.item())
    epoch_list.append(epoch)
    loss_list.append(loss.item())
 
    optimizer.zero_grad()
    loss.backward()
 
    optimizer.step()
 
 
plt.plot(epoch_list, loss_list)
plt.ylabel('loss')
plt.xlabel('epoch')
plt.show()

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值