![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
花书笔记
文章平均质量分 92
1000110011111101010100101111101
这个作者很懒,什么都没留下…
展开
-
【深度学习(deep learning)】花书第14章 自编码器 读书笔记
【深度学习(deep learning)】花书第14章 自编码器 读书笔记第14章 自编码器【深度学习(deep learning)】花书第14章 自编码器 读书笔记前言一、自编码器二、欠完备自编码器三、正则自编码器3.1 稀疏自编码器3.2 去噪自编码器 (denoising autoencoder, DAE)3.3 收缩自编码器(contractive autoencoder, CAE)四、深度自编码器(栈式自编码器)逐层训练权重绑定五、变分自编码器(variational auto-encoder原创 2021-04-07 20:28:51 · 339 阅读 · 0 评论 -
【深度学习(deep learning)】花书第12章 应用 读书笔记
【深度学习(deep learning)】花书第12章 应用 读书笔记第12章 应用【深度学习(deep learning)】花书第12章 应用 读书笔记前言一、大规模深度学习1.快速的CPU实现2.GPU实现3.分布式实现4.模型压缩5.动态结构6.深度网络的专用硬件实现二、计算机视觉1.预处理2.对比度归一化三、自然语言处理四、其他应用参考资料前言打基础,阅读花书,感觉一次性啃不动。看一点算一点,写一点笔记留作纪念。以便日后查看与回顾。最后一部分啦~蓦然回首,发现前面的也没记住啥原创 2020-12-09 19:56:24 · 351 阅读 · 0 评论 -
【深度学习(deep learning)】花书第11章 实践方法论 读书笔记
【深度学习(deep learning)】花书第11章 实践方法论 读书笔记第11章 实践方法论【深度学习(deep learning)】花书第11章 实践方法论 读书笔记前言一、实践方法论 ~~走进丹方~~二、性能度量2.1 分类2.2 回归(略)2.3 聚类(略)2.4 降维(略)三、基准模型 baseline四、调参 ~~开始炼丹~~4.1 手动选择4.2 自动选择4.2.1 网格搜索4.2.2 随机搜索4.2.3 基于模型或优化算法的超参数选择五、调试策略参考资料前言打基础,阅读花书,感原创 2020-12-05 16:15:03 · 327 阅读 · 0 评论 -
【深度学习(deep learning)】花书第10章 序列建模:循环和递归网络 读书笔记
【深度学习(deep learning)】花书第10章 序列建模:循环和递归网络 读书笔记第10章 序列建模:循环和递归网络 【深度学习(deep learning)】花书第10章 序列建模:循环和递归网络 读书笔记前言一、序列模型1.1 序列模型中的参数共享1.时延神经网络(卷积)2.循环神经网络1.2 计算图展开二、循环神经网络 RNN2.1 多对多,隐藏到隐藏**反向传播:通过时间反向传播(BPTT)**2.2 多对多,输出到隐藏训练算法:导师驱动过程(teacher forcing)2.3 多对原创 2020-12-04 20:58:59 · 280 阅读 · 0 评论 -
【深度学习(deep learning)】花书第9章 卷积网络 读书笔记
【深度学习(deep learning)】花书第9章 卷积网络 读书笔记第九章 卷积网络【深度学习(deep learning)】花书第9章 卷积网络 读书笔记前言一、卷积1.1 卷积运算二、池化三、卷积神经网络四、典型网络参考资料前言打基础,阅读花书,感觉一次性啃不动。看一点算一点,写一点笔记留作纪念。以便日后查看与回顾。大名鼎鼎CNN。2020.11.27以下是正式内容。一、卷积1.1 卷积运算一般意义上,卷积是对两个实变函数的一种数学运算。用*表示:s(t)=(x∗w)(原创 2020-11-29 17:23:24 · 564 阅读 · 0 评论 -
【深度学习(deep learning)】花书第8章 深度模型中的优化 读书笔记
【深度学习(deep learning)】花书第8章 深度模型中的优化 读书笔记第8章 深度模型中的优化【深度学习(deep learning)】花书第8章 深度模型中的优化 读书笔记前言一、学习与优化的关系深度模型训练的优化算法与传统的优化算法的区别:二、神经网络优化中存在的挑战1.病态2.局部极小3.鞍点三、经典的优化算法四、更高级的优化算法4.1 自适应优化算法4.2 二阶优化算法五、优化策略参考资料前言打基础,阅读花书,感觉一次性啃不动。看一点算一点,写一点笔记留作纪念。以便日后查看与回原创 2020-11-26 14:14:39 · 339 阅读 · 0 评论 -
【深度学习(deep learning)】花书第7章 深度学习中的正则化 读书笔记
【深度学习(deep learning)】花书第7章 深度学习中的正则化 读书笔记第7章 深度学习中的正则化【深度学习(deep learning)】花书第7章 深度学习中的正则化 读书笔记前言一、正则化二、参数正则化2.1 参数范惩罚2.1.1 L2参数正则化2.1.2 L1参数正则化2.2 作为约束的范数惩罚2.2.1 约束惩罚项2.2.2 将惩罚显式化2.3 正则化解决欠约束问题三、数据正则化四、模型正则化五、训练正则化参考资料前言打基础,阅读花书,感觉一次性啃不动。看一点算一点,写一点笔原创 2020-11-23 18:24:43 · 458 阅读 · 0 评论 -
【深度学习(deep learning)】花书第六章 深度前馈网络 读书笔记
【深度学习(deep learning)】花书第六章 深度前馈网络 读书笔记第六章 深度前馈网络【深度学习(deep learning)】花书第六章 深度前馈网络 读书笔记前言一、基本概念二、使用步骤1.引入库2.读入数据三、pandas是什么?参考资料前言打基础,阅读花书,感觉一次性啃不动。看一点算一点,写一点笔记留作纪念。以便日后查看与回顾。前面一部分基本在啃西瓜书的过程中看过了,直接从前馈网络开始再次记笔记。以下是正式内容。一、基本概念1.深度前馈网络(DFN) = 前馈神经网络原创 2020-11-21 15:38:07 · 509 阅读 · 0 评论 -
【深度学习(deep learning)】花书第二章 线性代数 读书笔记
【深度学习(deep learning)】花书第二章线性代数 读书笔记第一章 引言【深度学习(deep learning)】花书第二章线性代数 读书笔记前言一、基本概念二、矩阵运算三、特殊矩阵与向量四、范数五、特征分解与奇异值分解六、主成分分析参考资料前言打基础,阅读花书,感觉一次性啃不动。看一点算一点,写一点笔记留作纪念。以便日后查看与回顾。第一章引言就不写了,从第二章开始。第二章回顾线性代数等数学基础。日期:2020.11.17-以下是正式内容。一、基本概念标量(scalar原创 2020-11-18 17:10:24 · 450 阅读 · 0 评论