![](https://img-blog.csdnimg.cn/896183dbc6e44ca89591120c08dc5913.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
机器学习
文章平均质量分 72
机器学习
一只小菜狗:D
这个作者很懒,什么都没留下…
展开
-
概率图模型
如何根据一些已经观察到的数据(如训练样本)观测出感兴趣的未知变量(如类别)。概率图模型(probabilistic graphical model)是一类能够用图来表达变量相关关系的概率模型。可分为两类:使用有向无环图表示变量之间的依赖关系,称为有向图模型或者贝叶斯网(Bayesian network)使用无向图表示变量之间的相关关系,称为无向图模型或马尔可夫网(Markov network)EM(Expectation-maximization)算法EM算法的目的是解决变量中存在“隐变量”(原创 2021-10-26 21:45:00 · 337 阅读 · 0 评论 -
LDA简要介绍
前情提要这里只列出与之有关的数学公式,并不做具体的推导与其背后的数学故事。如果感兴趣的朋友可以看看LDA数学八卦,里面有完整的故事背景和数学证明。gamma函数:其数学形式为:如果对其做分部积分,我们有如下性质:易知:Dirichlet分布:其数学形式如下:对于给定的p⃗\vec pp和NNN,定义多项分布为:而上述这两个分布是共轭关系。Dirichlet 分布的一个性质:上面的内容不懂也没有关系,只需要在用到的时候过来查阅便好,这里列出只是方便查阅。吉布斯采样:这原创 2021-10-21 16:50:35 · 503 阅读 · 0 评论 -
最优化方法小结
线性搜索方法梯度下降牛顿法置信域方法启发式算法原创 2021-10-19 15:13:25 · 599 阅读 · 0 评论 -
svm手写推导
原创 2021-10-14 00:29:36 · 61 阅读 · 0 评论 -
线性回归,岭回归,LASSO回归与逻辑回归
线性回归线性回归,顾名思义,是使用属性之间的线性组合以预测输出,引入常量项x0=1x_0=1x0=1 后,其数学公式如下:y=∑i=0Nwixiy = \sum_{i=0}^N w_i x_iy=i=0∑Nwixi一般来说,我们使用均方误差作为其损失函数,其数学公式如下:L=∑k=1(w⃗xk−yk)2L=\sum_{k=1} (\vec w x_k-y_k)^2L=k=1∑(wxk−yk)2那我们的...原创 2021-10-12 10:59:14 · 3367 阅读 · 0 评论