- 博客(4)
- 收藏
- 关注
原创 第八周学习笔记
第八周学习笔记 学习内容 CS229复习与思考 1.Softmax Softmax是广义线性模型假设y服从多项分布时,导出的线性多分类模型,在推导过程中,需要注意的是假设总类数有kkk类时,第kkk类的概率ϕk\phi_kϕk不是参数,而由之前的k−1k-1k−1个参数决定,所以推导过程在k−1k-1k−1维的yyy和η\etaη下进行,值得注意的是,最后得到的似然函数为 l(Θ)=∏i=1ke...
2018-09-28 21:09:00 119
原创 第七周学习笔记
第七周学习笔记 本周的主要学习工作 1.CS229 [课程地址] 第十九讲,微分动态规划 主要内容 Debug强化学习算法 假设我们要建立一个直升机的强化学习算法 建立一个直升机的模拟器 选择回报函数 使用强化学习算法,得到策略 假如表现很差,怎么办? 诊断: 如果学习到的策略在模拟器中效果不错,但在现实中表现不佳,则是模拟器的问题 如果人类策略的值函数大于学习结果...
2018-09-21 21:34:01 219
原创 第六周学习笔记
第六周学习笔记 本周的主要学习工作 1.CS229 [课程地址] 第十三讲,离散与维数灾难 主要内容 值得注意的地方 1.EM算法的收敛 EM算法通过最大化似然函数的下界(使用Jesen不等式得到),来近似最大化似然函数,其优化过程相当与对于其下界函数的坐标上升。 2.高斯混合模型的优化 Q-step中的优化是一个条件极值问题,约束是Σjϕj=1Σjϕj=1\S...
2018-09-14 17:10:26 270
原创 第五周学习笔记
第五周学习笔记 本周的主要学习工作 1.CS229 [课程地址] 第十三讲,高斯混合模型 主要内容 EM算法 高斯混合模型(Gaussian mixed model) 文档聚类,混合贝叶斯模型(mixtures of naive Bayes) 因子分析(Factor analysis) 值得注意的地方 1.EM算法的收敛 EM算法通过最大化似然函数的下界(使用Jese...
2018-09-07 18:09:10 155
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人