python/numpy 同时打乱两个(多个) 列表

转载请注明出处
个人博客:https://maxusun.github.io/

在实际开发中,我们需要以相同的方法,同时打乱多个list,这里整理了几个常用的方法:

1. 使用zip
import random
c = list(zip(a,b))              # 将a,b整体作为一个zip,每个元素一一对应后打乱
random.shuffle(c)               # 打乱c
a[:],b[:] = zip(*c)             # 将打乱的c解开
2. numpy中的permutation函数
a = np.asarray([1,2,3,4,5,6)
b = np.asarray([6,5,4,3,2,1])

permutation = np.random.permutation(a.shape[0])         # 利用np.random.permutaion函数,获得打乱后的行数,输出permutation
a = a[permutaion]                                       # 得到打乱后数据a
b = b[permutation]                                      # 得到打乱后数据b
3. 使用numpy中的state
state = np.random.get_state()
np.random.shuffle(a)
np.random.set_state(state)
np.random.shuffle(b)
  • 7
    点赞
  • 13
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
### 回答1: 当我们想要将数据集分为不同的类别时,我们可以使用神经网络分类器。以下是一个使用Python的Keras库实现的简单的神经网络分类器的例题,数据集为鸢尾花数据集: ```python # 导入所需的库 from keras.models import Sequential from keras.layers import Dense from sklearn.datasets import load_iris from sklearn.model_selection import train_test_split from sklearn.preprocessing import LabelBinarizer # 加载数据集 iris = load_iris() X = iris.data y = iris.target # 将标签进行二进制编码 lb = LabelBinarizer() y = lb.fit_transform(y) # 将数据集分为训练集和测试集 X_train, X_test, y_train, y_test = train_test_split(X, y, test_size=0.2, random_state=42) # 创建神经网络模型 model = Sequential() model.add(Dense(10, input_dim=4, activation='relu')) model.add(Dense(3, activation='softmax')) # 编译模型 model.compile(loss='categorical_crossentropy', optimizer='adam', metrics=['accuracy']) # 训练模型 model.fit(X_train, y_train, epochs=100, batch_size=10) # 使用测试集评估模型 scores = model.evaluate(X_test, y_test) print("Test Accuracy: %.2f%%" % (scores[1]*100)) ``` 注释: 1. 导入所需的库,包括Keras、sklearn.datasets、sklearn.model_selection和sklearn.preprocessing。 2. 加载鸢尾花数据集,其中X是数据集的特征,y是目标变量。 3. 使用LabelBinarizer将目标变量进行二进制编码。 4. 将数据集分为训练集和测试集。 5. 创建一个顺序模型,并添加一个具有10个神经元的隐藏层和一个输出层。 6. 编译模型,使用categorical_crossentropy作为损失函数,Adam作为优化器,评估指标为准确率。 7. 训练模型,迭代100次,每次使用一个大小为10的批次。 8. 使用测试集评估模型并打印准确率。 ### 回答2: 题目:使用Python构建一个神经网络,实现猫狗图像分类的例子。 以下是详细注释的代码: ```python # 导入所需库 import numpy as np import matplotlib.pyplot as plt import os import cv2 import random from tensorflow.keras.models import Sequential from tensorflow.keras.layers import Conv2D, MaxPooling2D, Flatten, Dense # 设置随机种子数 random.seed(42) # 定义数据文件夹路径 data_dir = "data" categories = ["cats", "dogs"] # 定义图像大小 img_size = 100 # 创建训练数据列表 training_data = [] # 遍历图像文件夹 for category in categories: path = os.path.join(data_dir, category) class_num = categories.index(category) for img in os.listdir(path): try: img_array = cv2.imread(os.path.join(path, img), cv2.IMREAD_GRAYSCALE) new_array = cv2.resize(img_array, (img_size, img_size)) training_data.append([new_array, class_num]) except Exception as e: pass # 随机打乱训练数据顺序 random.shuffle(training_data) # 创建输入与输出列表 X = [] y = [] # 提取数据与标签 for features, label in training_data: X.append(features) y.append(label) # 转换数据与标签为数组 X = np.array(X).reshape(-1, img_size, img_size, 1) y = np.array(y) # 数据归一化处理 X = X / 255.0 # 构建神经网络模型 model = Sequential() # 添加卷积层 model.add(Conv2D(32, (3, 3), activation='relu', input_shape=(img_size, img_size, 1))) # 添加最大池化层 model.add(MaxPooling2D(pool_size=(2, 2))) # 添加卷积层 model.add(Conv2D(64, (3, 3), activation='relu')) # 添加最大池化层 model.add(MaxPooling2D(pool_size=(2, 2))) # 添加平坦层 model.add(Flatten()) # 添加全连接层 model.add(Dense(units=64, activation='relu')) # 添加输出层 model.add(Dense(units=1, activation='sigmoid')) # 编译模型 model.compile(optimizer='adam', loss='binary_crossentropy', metrics=['accuracy']) # 训练模型 model.fit(X, y, batch_size=32, epochs=10, validation_split=0.2) # 进行预测 test_img = cv2.imread("test_img.jpg", cv2.IMREAD_GRAYSCALE) test_img = cv2.resize(test_img, (img_size, img_size)) test_img = np.array(test_img).reshape(-1, img_size, img_size, 1) test_img = test_img / 255.0 prediction = model.predict(test_img) # 输出预测结果 if prediction[0] >= 0.5: print("狗") else: print("猫") ``` 这个例子通过使用Python和神经网络构建了一个猫狗图像分类器。首先,通过遍历存储猫狗图像的文件夹,加载图像并调整大小,创建训练数据。然后,随机打乱训练数据顺序,并将数据和标签提取出来并转换为数组。接下来,进行数据归一化处理。然后,构建了一个卷积神经网络模型,包括卷积层、池化层、平坦层、全连接层和输出层,并编译模型。最后,训练模型并进行预测。 ### 回答3: 下面是一个使用Python编写的神经网络分类的示例,具体是针对鸢尾花数据集进行分类。 ```python import numpy as np import pandas as pd from sklearn.model_selection import train_test_split from sklearn.preprocessing import StandardScaler # 从本地读取鸢尾花数据集,数据集中包含了花萼长度、花萼宽度、花瓣长度、花瓣宽度和花的类别 dataset = pd.read_csv("iris.csv") # 将类别进行编码,使其变成数值类型 dataset['Species'] = dataset['Species'].map({'Iris-setosa': 0, 'Iris-versicolor': 1, 'Iris-virginica': 2}) # 将特征矩阵和目标向量分离 X = dataset.iloc[:, :-1].values y = dataset.iloc[:, -1].values # 数据集划分为训练集和测试集 X_train, X_test, y_train, y_test = train_test_split(X, y, test_size=0.2, random_state=42) # 特征标准化 scaler = StandardScaler() X_train = scaler.fit_transform(X_train) X_test = scaler.transform(X_test) class NeuralNetwork: def __init__(self): np.random.seed(1) self.weights = [] self.bias = [] def add_layer(self, input_size, output_size): # 初始化权重和偏差 self.weights.append(np.random.randn(input_size, output_size)) self.bias.append(np.random.randn(output_size)) def sigmoid(self, x): # sigmoid激活函数 return 1 / (1 + np.exp(-x)) def sigmoid_derivative(self, x): # sigmoid函数的导数 return x * (1 - x) def forward_propagation(self, X): self.layers = [] self.layers.append(X) for i in range(len(self.weights)): # 计算每一层的输出 self.layers.append(self.sigmoid(np.dot(self.layers[i], self.weights[i]) + self.bias[i])) def backward_propagation(self, y): self.errors = [] self.gradients = [] for i in reversed(range(len(self.weights))): if i == len(self.weights) - 1: # 计算输出层的误差和梯度 self.errors.insert(0, y - self.layers[-1]) self.gradients.insert(0, self.errors[0] * self.sigmoid_derivative(self.layers[-1])) else: # 计算隐藏层的误差和梯度 self.errors.insert(0, np.dot(self.gradients[0], self.weights[i + 1].T)) self.gradients.insert(0, self.errors[0] * self.sigmoid_derivative(self.layers[i + 1])) def update_weights(self, learning_rate): for i in range(len(self.weights)): # 更新权重和偏差 self.weights[i] += learning_rate * np.dot(self.layers[i].T, self.gradients[i]) self.bias[i] += learning_rate * np.sum(self.gradients[i], axis=0) def train(self, X, y, epochs=1000, learning_rate=0.1): for _ in range(epochs): self.forward_propagation(X) self.backward_propagation(y) self.update_weights(learning_rate) def predict(self, X): self.forward_propagation(X) return self.layers[-1] # 创建神经网络对象 nn = NeuralNetwork() nn.add_layer(4, 5) # 输入层到隐藏层的权重和偏差 nn.add_layer(5, 3) # 隐藏层到输出层的权重和偏差 # 训练神经网络 nn.train(X_train, y_train) # 在测试集上进行预测 y_pred = np.argmax(nn.predict(X_test), axis=1) # 计算准确率 accuracy = np.sum(y_pred == y_test) / len(y_test) print("准确率:", accuracy) ``` 这个例子中我们首先导入必要的库,然后从本地读取了鸢尾花数据集。接下来,我们将鸢尾花的类别进行编码,转换成数值类型。然后,我们将特征矩阵和目标向量分离,并将数据集划分为训练集和测试集。之后,对特征进行标准化处理。 接下来我们创建了一个名为NeuralNetwork的神经网络类。在该类中,我们实现了神经网络的前向传播、反向传播和更新权重的方法。具体来说,我们使用sigmoid作为激活函数,同时用其导数来计算梯度。我们的神经网络具有两层,分别是输入层到隐藏层和隐藏层到输出层。在训练过程中,我们迭代多次进行前向传播、反向传播和权重更新。最后,我们在测试集上进行预测,并计算准确率。 以上就是一个使用Python实现的神经网络分类的具体例题,希望对你有帮助。
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

MaXuwl

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值