深度学习_学习笔记
tz_zs
路漫漫其修远兮,吾将上下而求索
展开
-
吴恩达 deeplearning.ai 课程《改善深层神经网络:超参数调试、正则化以及优化》____学习笔记(第一周)
____tz_zs学习笔记第一周 深度学习的实用层面(Practical aspects of Deep Learning)我们将学习如何有效运作神经网络(超参数调优、如何构建数据以及如何确保优化算法快速运行)设置ML应用(Setting up your ML application)1.1 训练 / 开发 / 测试集(Train / Dev / Test sets)老师语:在...原创 2018-03-13 00:47:20 · 1279 阅读 · 2 评论 -
吴恩达 deeplearning.ai 课程《神经网络和深度学习》____学习笔记(第四周)
____tz_zs学习笔记第四周 深层神经网络4.1 深层神经网络··4.2 深层网络中的前向传播老师语:在实现深度神经网络的过程中,减少bug的方法之一是——仔细和系统化的去思考矩阵的维数。4.3 核对矩阵的维数确认所有的矩阵维数是前后一致的,能大大减少bug的出现。·4.4 为什么使用深层表示本节课关...原创 2018-03-12 00:52:45 · 537 阅读 · 0 评论 -
吴恩达 deeplearning.ai 课程《神经网络和深度学习》____学习笔记(第三周)
____tz_zs学习笔记第三周 浅层神经网络3.1 神经网络概览本节课带你大概了解一下神经网络长什么样,以及流程。3.2 神经网络表示这是一个双层神经网络,因为我们不把输入层看作一个标准的层。“隐藏层”这个名字的含义是:在训练集中,这些中间节点的真正数值我们是不知道的,在训练集中你看不到他们的数值(训练集只有输入值和输出值),所谓的“隐藏层”仅仅只是表示你无法在...原创 2018-03-08 10:25:08 · 461 阅读 · 0 评论 -
吴恩达 deeplearning.ai 课程《神经网络和深度学习》____学习笔记(第二周 15~18)
____tz_zs学习笔记第二周 神经网络基础2.15 Python 中的广播···2.16 关于 python / numpy 向量的说明本视频内容:减少Python代码中的错误的小技巧Python numpy程序语言提供了很高的灵活性,这是汇总优势,同时也是弱势优势:语言的表现力更强,语言的灵活性很大,就是说,可以用一行代...原创 2018-03-05 00:00:51 · 473 阅读 · 0 评论 -
吴恩达 deeplearning.ai 课程《神经网络和深度学习》____学习笔记(第二周 7~14)
____tz_zs学习笔记第二周 神经网络基础2.7 计算图使用流程图从左到右来计算成本函数J2.8 计算图的导数计算反向从右到左计算导数·2.9 logistic 回归中的梯度下降法计算偏导数2.10 m 个样本的梯度下降m个样本一起求损失,使用m个样本的全局梯度来更新参数·显式的for循环,会使算法很...原创 2018-02-27 22:50:27 · 382 阅读 · 0 评论 -
deeplearning.ai《神经网络和深度学习》 第二周 神经网络基础 1~6
____tz_zs学习笔记第二周 神经网络基础2.1 二分分类在二元分类问题中,目标是训练出一个分类器,它以图片的特征向量 x 作为输入,预测输出的结果标签 y 是 1 还是 0,也就是预测图片中是否有猫。·2.2 logistic 回归给定图像的特征向量x,算法将评估图片中存在猫的概率。2.3 logistic 回归损失函数定义损失函数,训练参数w和b2.4 梯度下降法·2.5 导数本节课目的是...原创 2018-02-26 20:15:53 · 582 阅读 · 0 评论 -
deeplearning.ai《神经网络和深度学习》 第一周 深度学习概论
____tz_zs学习笔记第一周 深度学习概论1.3 用神经网络进行监督学习监督学习问题分为“回归”和“分类”问题。在回归问题中,我们试图预测连续的输出结果,也就是说我们是将输入变量映射到某个连续函数。在分类问题中,我们是试图预测离散的输出结果。换句话说,我们试图将输入变量映射到离散的类别。下面是一些监督学习的例子:卷积神经网络(CNN)经常用于图像领域。递归神经网络(RNN)经常用于一维序列数据...原创 2018-02-25 18:22:27 · 568 阅读 · 0 评论 -
生成对抗网络(GAN,Generative Adversarial Networks) 学习笔记
____tz_zs学习笔记GAN论文:[1406.2661] Generative Adversarial NetworksThe GAN Zoo(github上的一个项目,总结了所有GAN论文)知乎相关话题和好文章:令人拍案叫绝的Wasserstein GAN(详细的讲了WGAN)Lyken的回答 - 知乎(讲的很好,信息很多)其他:相对熵,又称KL散度( Kullback–Leibler di...原创 2017-12-14 02:57:06 · 2637 阅读 · 0 评论