生成模型与辨别模型(Generative vs discriminative model)
这两个模型一般是讲的分类问题
生成模型
1、使用贝叶斯理论推断后验分布
p(Ck|x)
p
(
C
k
|
x
)
,需要考虑先验分布
p(Ck)
p
(
C
k
)
和
p(X|Ck)
p
(
X
|
C
k
)
也可以对联合分布
p(X,Ck)
p
(
X
,
C
k
)
建模
2、使用决策论对x分配类
例子:
辨别模型(discriminative model)
辨别模型是确定一个函数,这个函数能直接将输入向量X,映射到K类别中的一类,表示为
Ck
C
k
1、直接计算
p(Ck|X)
p
(
C
k
|
X
)
2、使用决策理论(decision theory)为每一个新的X分配一个类型标签