![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
深度学习
文章平均质量分 68
Murphy_0606
这个作者很懒,什么都没留下…
展开
-
[转]深度学习中的正则化
摘自实验楼:https://www.shiyanlou.com/courses/820/labs/2939/document部分内容 为了理解正则化在深度学习中的作用,我们以回归问题为例讲解。如图,假设我们现在要根据图中的六个点拟合出数据的分布曲线,用于预测其他x坐标对应的y值,我们使用如下的多项式进行拟合: y=a0+a1*x+a2*x^2+a3*x^3+…假如一开始,只有a0和a1不为0,其转载 2017-06-24 17:19:55 · 1739 阅读 · 0 评论 -
KL散度
学习KL散度主要是因为无监督学习的变分自编码器用到了这方面的知识。关于KL散度的概念介绍参考百科:https://baike.baidu.com/item/%E7%9B%B8%E5%AF%B9%E7%86%B5/4233536?fr=aladdin下面的内容参考自 冯超 CreateAMind微信公众号文章:https://mp.weixin.qq.com/s/9lNWkEEOk5vEkJ1f840转载 2017-08-28 08:49:26 · 609 阅读 · 0 评论 -
激活函数hard sigmoid
The standard sigmoid is slow to compute because it requires computing the exp() function, which is done via complex code (with some hardware assist if available in the CPU architecture). In many cases转载 2017-09-05 11:06:03 · 4188 阅读 · 0 评论 -
神经网络中的激活函数
整理这个问题源自于一次面试。转自:http://blog.csdn.net/u010002387/article/details/527972871.激活函数有哪些性质?为什么要用激活函数 ?关于神经网络激励函数的作用,常听到的解释是:不使用激励函数的话,神经网络的每层都只是做线性变换,多层输入叠加后也还是线性变换。因为线性模型的表达能力不够,激励函数可以引入非线性因素。 其实很多时候我们更想直观的转载 2017-09-05 10:56:50 · 475 阅读 · 0 评论 -
Auto-Encoding Variational Bayes
为了了解变分自编码器而查到这篇论文,但是看起来比较难懂,所以就一边用翻译软件翻译一遍记录着读。摘要在有向概率模型中,如果存在具有难处理的后验分布的连续隐变量和大型数据集,我们如何能够进行有效的推理和学习? 我们引入了随机变分推理和学习算法,其扩展到大数据集,并且在一些温和的差异性条件下,甚至可以在棘手的情况下工作。 我们的贡献是双重的。 首先,我们表明,变分下界的重新参数化产生了可以使用标准随机梯度原创 2017-08-25 17:08:08 · 5541 阅读 · 1 评论 -
[转]详细解释CNN卷积神经网络各层的参数和链接个数的计算
http://blog.csdn.net/dcxhun3/article/details/46878999转载 2017-08-25 14:42:41 · 515 阅读 · 0 评论 -
生成模型、最大化似然、KL散度
转载自 黄锦池:http://blog.csdn.net/hjimce/article/details/73770644?locationNum=4&fps=1这篇博客里介绍了为什么最大化似然等价于最小化KL散度。转载 2017-08-25 10:34:31 · 752 阅读 · 0 评论 -
非极大值抑制原理
转自:http://blog.csdn.net/u011534057/article/details/51218250 RCNN算法,会从一张图片中找出n多个可能是物体的矩形框,然后为每个矩形框为做类别分类概率: 就像上面的图片一样,定位一个车辆,最后算法就找出了一堆的方框,我们需要判别哪些矩形框是没用的。非极大值抑制:先假设有6个矩形框,根据分类器类别分类概率做排序,从小到大分别属于车辆的转载 2017-08-20 10:48:43 · 3564 阅读 · 0 评论 -
py-faster-rcnn用自己的数据集微调用到的资料
1.利用py-faster-rcnn训练网络时内存不足该如何更改batch_size? 如果是分类可以裁剪改变图片大小,对于检测2.图像扩充用于图像目标检测 http://blog.csdn.net/wei_guo_xd/article/details/74199729Faster-RCNN+ZF用自己的数据集训练模型(Python版本) http://blog.csdn.net/sin原创 2017-08-17 17:29:33 · 438 阅读 · 0 评论 -
说说激活函数
激活函数有哪些?怎么选择激活函数?转载 2017-11-02 21:50:08 · 419 阅读 · 0 评论