面试题
礼拜天吃芋圆
这个作者很懒,什么都没留下…
展开
-
面试题集合(2)深度学习中的优化方法
深度学习中的优化算法: 一、梯度下降 SGD:mt=gt,vt = I^2 SGD with Momentum: mt = βm(t-1)+(1-β)gt (也就是说,t 时刻的下降方向,不仅由当前点的梯度方向决定,而且由此前累积的下降方向决定。) SGD with NAG: (知道在时刻t的主要下降方向是由累积动量决定的,自己的梯度方向说了也不算,那与其看当前梯度方向,不如先看看如果跟着累...原创 2019-07-17 16:36:28 · 743 阅读 · 0 评论 -
主题分布
PLSA的推导: 主要通过文档生成主题,主题生成词的逆过程来求解。 求解的方式:化简成主题分布,和词分布的两个参数的形式。再用EM方法求解 https://blog.csdn.net/m0_37788308/article/details/78115378 LDA模型: 在PLSA的基础上加上了贝叶斯框架 先用用一个Dirichlet分布去取主题,再用一个Dirichlet分布去取词。 htt...原创 2019-06-21 11:58:15 · 1263 阅读 · 0 评论 -
面试题集合(1)
1.为什么用sigmiod函数原创 2019-06-06 14:21:53 · 165 阅读 · 0 评论