NLP&ML
1、生成型&判别型
- 判别模型(discriminative model)通过求解条件概率分布P(y|x)或者直接计算y的值来预测y
- 生成模型(generative model)通过对观测值和标注数据计算联合概率分布P(x,y)来达到判定估算y的目的
判别型 | 生成型 |
---|---|
线性回归(Linear Regression) | 朴素贝叶斯(Naive Bayes) |
逻辑回归(Logistic Regression) | 隐马尔科夫模型(HMM) |
支持向量机(SVM) | 隐含狄利克雷分布(LDA主题模型) |
线性判别分析(LDA) | 高斯混合模型 |
条件随机场(CRF) |
2、最大概率分词 => 南京 市长 江大桥
- 一个待切分的汉字串可能包含多种分词结果,将其中概率最大的作为该字串的分词结果。
- 若某候选词在训练语料中未出现,其概率为0。
以P(w)表示词条w的概率,假设已知P(南京)