![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
NLP
文章平均质量分 76
beautyfairy
这个作者很懒,什么都没留下…
展开
-
HMM在工程中的应用
整体框架nlp的中文分词了解分词原理结合分词原理及知识点,对应理解马尔可夫原理马尔科夫假设中提到维特比算法常用的分词的库 就是一个插件——jieba分词知乎上看到的分词过程图:了解了分词的大概过程:断句、标注、根据词典加载概率。隐马尔可夫举例理解隐马尔可夫思想大概思想:生活中有三种骰子:6个面、3个面和8个面,对应每个骰子会出现6种、3种、8种情况,如果只看最终的投掷结果(给定一个序列值),其实包含了:隐含的状态,就是选择哪个骰子可见的状态,骰子投出的数值假设每个状态原创 2022-01-04 23:09:20 · 780 阅读 · 0 评论 -
fastai course—nlp
1.什么是nlpNLP是一个广泛的领域,包含了语音部分标记:识别每个词是否是名词、动词、形容词等)命名实体识别NER):识别人名、组织、地点、医疗代码、时间表达、数量、货币价值等)问题回答语音识别文本到语音和语音到文本主题建模情感分类语言建模翻译...原创 2021-11-04 19:13:14 · 169 阅读 · 0 评论 -
NLP——基于深度学习的自然语言处理
NLP编码方式One-hot独热编码(人为规定)特征系稀疏词之间相互独立不能表征词与词之间的关系,one-hot之间正交Embedding编码(词向量矩阵)特征稠密能够表征词语词之间的互相关系泛化性更好(one-hot与之相比就是完全命中),支持语义计算词监督词向量方法自监督学习skip-gramskip-gram目标是:最大化上下文单词的预测概率skip-gram过程如下图所示:eg:CBoWCBoW目标是:最大化中间词的预测概率CBoW过程原创 2021-10-11 21:52:30 · 470 阅读 · 1 评论