![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
NLP
文章平均质量分 92
kalakalayang
这个作者很懒,什么都没留下…
展开
-
数学之美阅读笔记
第一部分:NLP1、从规则语言模型到统计语言模型2、统计语言模型:为自然语言建立的数学模型,用数学方法描述自然语言。P(s1,s2,s3,...)3、马尔科夫假设与二元模型(N元模型)4、古德-图灵估计:解决0概率问题和”不平滑“模型问题对于没有看见的时间,我们不能认为它发生的概率是0,因此我们从概率总量中分配一个很小的比例给这些没有看见的事件。这样一来,看见的那些事件的概...原创 2018-08-07 21:26:37 · 208 阅读 · 0 评论 -
隐马场与中文分词
统计学习方法(李航) HMM RNN LSTM看完神清气爽:https://www.jianshu.com/p/a2755179be5b HMM MEMM CRF: https://www.zhihu.com/question/35866596 HMM:生成式模型 MEMM:判别式模型,标注偏置问题(特征函数局部最优) CRF:判别式模型,特征函数(全局,解决了标注偏置问题) LSTM...原创 2018-08-07 21:27:49 · 254 阅读 · 0 评论 -
Statistical Language Model笔记+几个简单平滑算法
转载自:https://blog.csdn.net/hx14301009/article/details/803410951. N-GRAM 定在应用中,需要计算一个句子的概率,一个句子是否合理就看他的可能性大小,这里的可能性大小就是用概率来衡量:如在机器翻译中: P(high winds tonite) > P(large winds tonite)...转载 2018-08-08 10:56:50 · 1179 阅读 · 0 评论