丁磊_ml的博客

原创 命名实体识别 NER

文章目录搭建NER分类器评估NER分类器NER方法基于规则的方法(Rule-based Approach)投票模型(Majority Voting)基于分类模型-----非时序模型：逻辑回归，SVM ...特征工程Feature Encoding搭建NER分类器定义实体种类准备训练数据训练NER评估NER分类器精确率/召回率F1-scoreNER方法基于规则（比如正则）投票模型（Majority Voting）利用分类模型非时序模型：逻辑回归，SVM …时序模型：HMM，C

原创 解一个难题的思路

原创 自然语言处理：专家系统简介

专家系统的工作流程推理引擎推理引擎可以扩展 知识库中的知识。解决规则冲突选择最小规则子集

原创 自然语言处理-----语言模型 Language Model

文章目录Language Model(LM) 简介Chain Rulesparsity 稀疏性问题马尔可夫假设Language Model: Unigram, Bigram, N-gram举例：Unigram, Bigram 模型的训练过程和使用UnigramBigram语言模型的评估-----Perplexity平滑函数Add-one Smoothing (也就是 拉普拉斯平滑)Add-K SmoothingInterpolationGood-Turning Smoothing语言模型的应用：生成句子