动手学深度学习
Void_Pointer -
这个作者很懒,什么都没留下…
展开
-
《动手学深度学习》图像分类案例2;GAN;DCGAN
图像分类案例2;GAN;DCGAN图像分类案例2任务模型GAN损失函数判别器生成器DCGAN任务模型转置卷积层图像分类案例2任务Kaggle竞赛中的犬种识别挑战,比赛的网址是https://www.kaggle.com/c/dog-breed-identification在这项比赛中,我们尝试确定120种不同的狗。首先对数据集结构进行了整理,原数据集按train、test结构,修改后在tr...原创 2020-02-25 16:30:28 · 783 阅读 · 0 评论 -
《动手学深度学习》目标检测基础;图像风格迁移;图像分类案例1
目标检测基础;图像风格迁移;图像分类案例1目标检测基础锚框交并比标注训练集的锚框图像风格迁移模型损失函数内容损失样式损失总变差损失总损失函数图像分类案例1任务模型目标检测基础在图像中标出目标图像的位置,成为目标检测。锚框以每个像素为中心,生成多个大小和宽高比不用的边界框,这些边界框就是锚框。设输入图像高为hhh,宽为www,锚框大小为s∈(0,1]s\in (0,1]s∈(0,1]且宽...原创 2020-02-25 10:23:37 · 360 阅读 · 0 评论 -
《动手学深度学习》批量归一化和残差网络;凸优化;梯度下降
批量归一化和残差网络;凸优化;梯度下降批量归一化和残差网络对全连接层做批量归一化对卷积层做批量归一化残差网络(ResNet)ResNet模型稠密连接网络(DenseNet)过渡层DenseNet模型批量归一化和残差网络对全连接层做批量归一化归一化增加在全连接层激活函数之前,全连接层输入为uuu,批量归一化运算符BNBNBN,那么使用批量归一化的全连接层的输出为:ϕ(BN(x))\phi(\...原创 2020-02-21 17:03:39 · 335 阅读 · 0 评论 -
《动手学深度学习》机器翻译及相关技术;注意力机制与Seq2seq模型;Transformer
机器翻译及相关技术;注意力机制与Seq2seq模型;Transformer机器翻译及其相关技术编码器和解码器编码器解码器束搜索贪婪搜索束搜索注意力机制与Seq2Seq模型计算背景变量机器翻译及其相关技术机器翻译(MT):将一段文本从一种语言自动翻译为另一种语言,用神经网络解决这个问题通常称为神经机器翻译(NMT)。主要特征:输出是单词序列而不是单个单词。 输出序列的长度可能与源序列的长度不同...原创 2020-02-18 15:47:47 · 210 阅读 · 0 评论 -
《动手学深度学习》卷积神经网络基础;leNet;卷积神经网络进阶
卷积神经网络基础;leNet;卷积神经网络进阶卷积神经网络基础二位互相关运算二维卷积层互相关运算与卷积运算特征图与感受野填充和步幅**填充**:在输入的高宽两侧填充元素,通常填充0。**步幅**:卷积核在输入数组上每次滑动的行数列数。多输入通道和多输出通道1×11×11×1卷积层池化LeNetLeNet模型卷积神经网络进阶卷积神经网络基础介绍的是最常见的二维卷积层,常用于处理图像数据。二位互...原创 2020-02-17 15:20:27 · 256 阅读 · 0 评论 -
《动手学深度学习》过拟合、欠拟合及其解决方案;梯度消失、梯度爆炸;循环神经网络进阶
过拟合、欠拟合及其解决方案;梯度消失、梯度爆炸;循环神经网络进阶过拟合欠拟合及其解决方案模型选择、过拟合和欠拟合模型选择验证数据集K折交叉验证过拟合和欠拟合模型复杂度训练集大小权重衰减L2L_2L2范数正则化丢弃法过拟合欠拟合及其解决方案模型选择、过拟合和欠拟合首先要区分训练误差和泛化误差。训练误差:模型在训练数据集上表现出的误差泛化误差:模型在任意一个测试数据样本上表现出的误差的期望...原创 2020-02-15 15:05:46 · 275 阅读 · 0 评论 -
《动手学深度学习》文本预处理、语言模型、循环神经网络基础
文本预处理、语言模型、循环神经网络基础文本预处理读入文本文本预处理文本是一类序列数据,一篇文章可以看作是字符或单词的序列,本节将介绍文本数据的常见预处理步骤,预处理通常包括四个步骤:1.读入文本2.分词3.建立字典,将每个词映射到一个唯一的索引(index)4.将文本从词的序列转换为索引的序列,方便输入模型读入文本在此用H. G. Well的英文小说Time Machine作为示例...原创 2020-02-14 15:33:49 · 304 阅读 · 0 评论 -
《动手学深度学习》线性回归、Softmax与分类模型、多层感知机
线性回归、Softmax与分类模型、多层感知机线性回归任务目标数据集损失函数优化函数 - 随机梯度下降Softmax与分类模型任务目标神经网络图SoftMax损失函数多层感知机任务目标隐藏层激活函数ReLUSigmoidtanh激活函数的选择线性回归任务目标我们假设房屋价格取决于房屋面积与房屋年龄,则假设他服从一个线性关系:price=warea⋅area+wage⋅age+b\mathr...原创 2020-02-14 10:32:30 · 335 阅读 · 0 评论 -
《动手学深度学习》线性回归 -- 2/11
线性回归import packages and modules生成数据集import packages and modulesimport torchfrom IPython import displayfrom matplotlib import pyplot as pltimport numpy as npimport random生成数据集自己生成一个带噪声的线性数据集,线性...原创 2020-02-11 22:32:51 · 306 阅读 · 1 评论