生成模型和判别模型

转载 2015年07月08日 16:45:28

生成模型与判别模型

监督学习的任务就是学习一个模型,应用这个模型,对给定的输入预测相应的输出。这个模型一般为决策函数:Y=f(X) 或 条件概率分布:P(Y|X)

监督学习的学习方法可以分为生成方法(generative approach)和判别方法(discriminative approach)。所学到的模型分别叫生成模型和判别模型。

 

生成方法

定义

由数据学习联合概率分布P(X,Y), 然后由P(Y|X)=P(X,Y)/P(X),求出概率分布P(Y|X)。该方法表示了给定输入X产生输出Y的生成关系。

典型模型

朴素贝叶斯方法、隐马尔可夫模型

特点

生成方法可以还原出联合概率分P(X,Y),而判别方法不能;生成方法的学习收敛速度更快,当样本容量增加的时候,学到的模型可以更快的收敛于真实模型;当存在隐变量时,仍可以利用生成方法学习,此时判别方法不能用。

注释

当我们找不到引起某一现象的原因的时候,我们就把这个在起作用,但是,无法确定的因素,叫“隐变量”


判别方法

 定义

由数据直接学习决策函数Y=f(X)或条件概率分布P(Y|X)作为预测模型,即判别模型。判别方法关心的是对于给定的输入X,应该预测什么样的输出Y

典型模型

k近邻法、感知机、决策树、逻辑斯谛回归模型、最大熵模型、支持向量机、提升方法、条件随机场

特点

判别方法直接学习的是决策函数Y=f(X)或条件概率分布P(Y|X),直接面对预测,往往学习准确率更高;由于直接学习P(Y|X)f(X),可以对数据进行各种程度上的抽象、定义特征并使用特征,因此可以简化学习问题。

机器学习中的判别模型和生成模型

两个模型是啥我们从几句话进入这两个概念: 1、机器学习分为有监督的机器学习和无监督的机器学习; 2、有监督的机器学习就是已知训练集数据的类别情况来训练分类器,无监督的机器学习就是不知道训练集的类别...
  • lk7688535
  • lk7688535
  • 2016年08月29日 15:13
  • 1701

生成模型和判别模型的理解

【摘要】     - 生成模型:无穷样本==》概率密度模型 = 产生模型==》预测     - 判别模型:有限样本==》判别函数 = 预测模型==》预测 【简介】 简单的说,假设o是观察值...
  • u010159842
  • u010159842
  • 2015年07月24日 16:15
  • 1672

分类:从生成模型到判别模型

在解决分类问题时,生成模型(generative model)和判别模型(discriminative model)是常用的两类模型。生成模型从数据中学习特征和标签的联合概率分布p(x,y),而判别模...
  • weixin_38345294
  • weixin_38345294
  • 2017年05月25日 19:24
  • 400

生成模型(Generative)和判别模型(Discriminative)

生成模型(Generative)和判别模型(Discriminative)    方法
  • roypi
  • roypi
  • 2014年09月23日 23:55
  • 1497

生成模型 与 判别模型

判别式模型与生成式模型的区别 产生式模型(Generative Model)与判别式模型(Discrimitive Model)是分类器常遇到的概念,它们的区别在于: 对于输入x,...
  • chlele0105
  • chlele0105
  • 2014年08月28日 22:41
  • 1345

生成模型,判别模型,以及朴素贝叶斯

首先从监督学习来认识 1.监督学习的主要任务就是学习一个模型,应用这一模型,对给定的输入预测相应的输出。这一模型的一般形式为决策函数:Y=f(X)Y=f(X) 或条件概率分布:P(Y|X)P(Y|...
  • G090909
  • G090909
  • 2015年12月07日 18:10
  • 1721

机器学习基础(二十一)—— 分类与回归、生成模型与判别模型

分类与回归 (1)分类的目标变量是标称型数据(categorical data),0/1,yes/no (2)回归:连续型(numeric data),鲍鱼的年龄,玩具的售价 生成模型与判别模型 生成...
  • lanchunhui
  • lanchunhui
  • 2016年03月25日 17:24
  • 966

生成模型与判别式模型的区别

看了JerryLead大神的博客,茅塞顿开!所以把他的文章转载过来,希望在之后对相关知识模糊的时候能够看看,加深理解。原始链接原始链接地址 1判别模型与生成模型 上篇报告中...
  • SuNoob
  • SuNoob
  • 2015年10月27日 20:50
  • 966

判别模型(Discriminative model)和生成模型(Generative model)

说明生成算法和判别算法之间的区别。判别算法主要包括:SVM,逻辑回归等;生成算法主要包括:朴素贝叶斯,HMM等...
  • Fishmemory
  • Fishmemory
  • 2016年06月19日 09:06
  • 7411

生成模型与判别模型的区别

本文章属于转载,目前自己的水平还不能透彻的对它进行更详细的扩充,目的是为了以后自己学习方便,希望原博主不要介意,已表明出处,O(∩_∩)O 原文在here 一、决策函数Y=f(X)或者条件概率...
  • qq_29133371
  • qq_29133371
  • 2016年05月23日 10:08
  • 771
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:生成模型和判别模型
举报原因:
原因补充:

(最多只允许输入30个字)