天地玄黄 魑魅魍魉 风花雪月 商角徵羽 暂时停更 十月重见

本文使用不同滤波器实现了图像去模糊、去噪、提取边缘特征

基于CGAN的手写数字生成实验——模型改进：一、 超参数优化：batch size、learning rate、n_critic二、 逐层归一化：BN、LN、IN、GN三、 损失函数改进： MSELoss、CELoss、BCEWithLogitsLoss四、 激活函数选择：ReLU、LeakyReLU、PReLU、ELU、Swish(SiLU)、GELU五、 优化器改进：AdamW、Adamax、RAdam六、 噪声z的分布：均匀分布、拉普拉斯分布、多变量高斯分布七、其余设想

基于CGAN的手写数字生成实验——超参数调整：一、batch size理论分析定量实验batch size与训练时间关于loss曲线的说明二、epochs定量实验epoch与batch size相同step下不同batch size三、Adam：learning rate四、Adam：weight_decay五、n_criticloss曲线相同step下不同n_critic

PyTorch下TensorBoard使用教程，详细介绍了SCALARS、IMAGES、TIME SERIES的具体使用

本实验实现了自定义图像数据增强操作，主要包括图像合成（粘贴组合）、图像融合（创建高斯掩码融合两个图像）

本实验中详细介绍了三种自定义图像数据增强操作：Cutout、Random Erasing 和 Mixup（遮挡、随机擦除和图像混合）

本实验介绍了通过PIL库完成图片生成、合成、添加文字等操作，并分别使用PIL和PyTorch中的transforms模块实现图像增强功能。

本实验介绍了 PIL 的基本用法，主要包括图像读取、写入、复制、粘贴、几何变换以及图像增强、图像滤波等方面

本文介绍了注意力机制中的点积注意力与缩放点积注意力模型之比较

本文介绍了深度学习注意力机制中的打分函数——加性注意力模型（使用掩码Softmax）

本文介绍了深度学习注意力机制中的掩码Softmax 操作

本文介绍了注意力权重矩阵的可视化：矩阵热图heatmap的绘制

本文介绍了神经网络优化的逐层归一化方法，包括批量归一化、层归一化、权重归一化（略）、局部响应归一化（略）等内容

本文介绍了神经网络优化的逐层归一化方法，包括批量归一化、层归一化、权重归一化（略）、局部响应归一化（略）等内容

本文介绍了神经网络中的数据预处理方法，包括标准化、归一化、白化、去除异常值、处理缺失值等

本文介绍了神经网络优化——参数初始化方法，包括基于固定方差的参数初始化（高斯、均匀分布），基于方差缩放的参数初始化（Xavier、He），正交初始化等

本文详细介绍了随机梯度下降算法的改进——Adam算法（Adam≈梯度方向优化Momentum+自适应学习率RMSprop）

【Python报错合集】Python元组tuple、张量tensor（IndexError、TypeError、RuntimeError……）

本文详细介绍了基于自适应学习率的优化算法，包括Adagrad、Adadelta、RMSprop算法

深度神经网络在机器学习中应用时面临两类主要问题：优化问题和泛化问题，本文将介绍使用动量优化的随机梯度下降算法（Stochastic Gradient Descent with Momentum）

本实验实现了基于GRU的语言模型训练，包括自定义门控循环单元GRU

基于 LSTM 的语言模型训练

LSTM（长短期记忆网络）是一种循环神经网络（RNN）的变体，用于处理序列数据。它具有记忆单元和门控机制，可以有效地捕捉长期依赖关系。

本实验实现了一个简单的循环神经网络（RNN）模型，并使用该模型进行序列数据的预测。

本实验介绍了一个简单的循环神经网络（RNN）模型，并探讨了梯度裁剪在模型训练中的应用。

本实验使用深度残差神经网络ResNet完成了图片多分类任务（CIFAR-10数据集，包含10个种类）

本实验实现了实现深度残差神经网络ResNet。

本实验实现了自定义的卷积神经网络模型（VGG），并实现图片多分类任务（CIFAR-10数据集，包含10个种类）

本实验实现了深度卷积神经网络中的经典模型——VGG网络（简化版），并基于此完成图像分类任务。

本实验实现了一个自定义的二维汇聚层（池化层），包括前向传播中进行最大池化、平均池化等操作。

本实验实现了二维卷积神经网络卷积层设置步长、填充、输入输出通道等功能。

本实验实现了一个简单的二维卷积神经网络，包括二维互相关运算函数和自定义二维卷积层类，并对一个随机生成是二维张量进行了卷积操作。

本文主要介绍了卷积运算及其Pytorch实现，包括一维卷积（窄卷积、宽卷积、等宽卷积）、二维卷积。

本实验实现了鸢尾花分类前馈神经网络模型，并进行了训练和评价。

本实验实现了Runner类，用于模型的训练、评估和预测。通过该类，可以更方便地进行模型的训练和评估，并获取训练过程中的损失变化和评价指标的变化情况等。

本实验实现了一个计算预测准确率的Accuracy类，支持对每一个回合中每批数据进行评价，并将结果累积，最终获得整批数据的评价结果。

本文介绍了如何基于鸢尾花数据集构建一个数据迭代器，以便在每次迭代时从全部数据集中获取指定数量的数据。（借助深度学习框架中的Dataset类和DataLoader类来实现此功能。）

本文介绍了Pytorch张量自动求导机制

本实验实现了线性模型的前向传播和反向传播

本实验实现了逻辑回归的前向传播和反向传播