![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
CS231n
江湖小白骗
这个作者很懒,什么都没留下…
展开
-
CS231n 2.1节数据驱动方法学习笔记
图片分类器图片在计算机眼中就是一个巨大的矩阵,每一个像素点通过几个数字表示,比如RGB语义鸿沟:语义概念和计算机中的巨大矩阵有着非常大的区别视角、光照、物体不同形状、遮挡、图片背景混乱、种内差异的变化为计算机能够把同类的物体识别出来带来了巨大挑战。最早的数据驱动图片分类算法nearest neighbor 分类器记录所有的学习资源,然后搜索与现有学习到的资源最相近的图片,并输出它的标签...原创 2018-10-14 21:25:38 · 168 阅读 · 0 评论 -
CS231n 4.1反向传播 学习笔记
反向传播今天进入核心内容,如何计算任意复杂函数的梯度计算图图的节点表示我们要进行的每一步的运算一旦我们能用计算图表示一个计算,我们就可以用它来进行反向传播的求解反向传播是如何工作的呢?前向传播:从输入到输出反向传播:链式法则的递归调用,计算输出对每一个输入量的偏导数,即梯度加法门:梯度分离最大门:梯度路由乘法门:梯度转换器雅可比矩阵:每一个元素都是偏导数,在此是一个对角矩阵...原创 2018-10-18 14:24:00 · 202 阅读 · 0 评论 -
CS231n 3.1损失函数
损失函数以W为输入,以W的表现为输出的函数叫做损失函数损失函数的输出越小,W的拟合度越好SVM损失函数也叫作合页函数Syi 是第i个样本的真实类的数据公式中的“1”是一个可选择的值,成为自由参数,对于问题没有影响问: 如果s大都接近于0,那么损失函数等于多少呢?答: 类别数-1问: 将所有的类求和,将得到的损失函数的值是多少?答: 1损失函数是你用来表示对不同错误重视程...原创 2018-10-15 18:44:51 · 159 阅读 · 0 评论 -
CS231n 6.1激活函数 学习笔记
最小批量梯度下降训练神经网络内容总述准备我们在刚开始要如何建立起神经网络要选择什么样的激活函数怎么做数据预处理权重初始化、正则化和梯度检查动态训练如何监督这个学习过程如何选择参数的特定更新规则怎样做超参数优化从而获取最佳超参数模型评估和模型集成激活函数Sigmoid函数问题:(1) 饱和神经元使得梯度消失(2) Sigmoid是一个非零中...原创 2018-10-20 22:44:37 · 253 阅读 · 0 评论