- 博客(5)
- 收藏
- 关注
原创 《深度学习》 第11章 实践方法论
《深度学习》 第11章 实践方法论 要成功地使用深度学习技术,仅仅知道存在哪些算法和解释他们为何有效的原理是不够的。 一个优秀的机器学习实践者还需要知道如何针对具体应用挑选一个合适的算法以及如何监控,并根据实验反馈改进机器学习系统。在机器学习系统的日常开发中,实践者需要决定是否收集更多的数据、增加或减少模型容量、添加或删除正则化项、改进模型的优化、改进模型的近似推断或调试模型的软件实现。尝试这些操...
2018-12-24 19:51:22 567
原创 《深度学习》 第9章 卷积网络
《深度学习》 第9章 卷积网络 卷积网络是指那些至少在网络的一层中使用卷积运算来替代一般的矩阵乘法运算的神经网络。 卷积网络 连续形式的卷积运算: s(t)=∫x(a)w(t−1)da=(x∗w)(t)s(t) = \int x(a)w(t-1)da = (x * w)(t)s(t)=∫x(a)w(t−1)da=(x∗w)(t) xxx通常称为输入,www通常称为核函数,输出通常称为特征映射。 离...
2018-12-24 19:50:49 1282
原创 《深度学习》 第8章 深度模型中的优化
《深度学习》 第8章 深度模型中的优化 学习和纯优化有什么不同 纯优化最小化目标JJJ本身。训练深度模型的优化算法通常也会包括对机器学习目标函数的特定结构进行的特化 经验风险最小化 通常不知道真实分布pdata(x,y)p_{\text{data}}(x,y)pdata(x,y),只知道训练集上的经验分布p^data(x,y)\hat p_{\text{data}}(x,y)p^data(x...
2018-12-24 19:50:13 2289
原创 《深度学习》 第7章 深度学习中的正则化
《深度学习》 第7章 深度学习中的正则化 开发更有效的正则化策略已成为本领域的主要研究工作之一。 可将正则化定义为“对学习算法的修改——旨在减少泛化误差而不是训练误差” 设计为编码特定类型的先验知识 对简单模型的偏好 集成方法,结合多个假说来解释训练模型 估计的正则化以偏差的增加换取方差的减少。讨论泛化时,主要侧重模型族的3个情形: 不包括真实的数据生成过程——对应于欠拟合和含有偏差的情况 ...
2018-12-24 19:49:33 1308
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人