机器学习
Angel_LQ
蜗牛一步一步往上爬
展开
-
前向分步算法到AdaBoost
前向分步算法与AdaBoost有什么关系呢?除了都属于Boosting的模型,其实AdaBoost是当前向分步算法损失函数为指数损失时的特例。这篇就写一下推导的过程。前向分步算法 Forward Stagewise Additive Modeling初始化f0(x)=0f0(x)=0对于m=1,2,...,Mm=1,2,...,M (a)(βm,γm)=argminβ,γ∑i=1NL(yi,fm−...转载 2018-06-28 10:47:31 · 314 阅读 · 0 评论 -
判别模型和生成模型
在前面的章节中,我们介绍过SVM、逻辑回归,这两者都属于监督学习中的一种,即训练数据的标签是给定的,我们希望通过对训练数据进行学习,这样对于给定的新样本数据,我们可以对它的类别标签进行预测。实际上,监督学习又可以分为两类,判别模型(Discriminative model)和生成模型(generative model),前面提到的SVM和逻辑回归都属于判别模型的一种。那么判别模型和生成模型有何区别...转载 2018-07-24 12:33:20 · 228 阅读 · 0 评论