贝叶斯NLP迷你项目

最新推荐文章于 2024-06-26 22:19:42 发布

newuhe

最新推荐文章于 2024-06-26 22:19:42 发布

阅读量1.7k

点赞数

分类专栏：机器学习

本文链接：https://blog.csdn.net/qq_31735049/article/details/54814152

版权

本文档是关于贝叶斯自然语言处理的迷你项目，涉及计算单词在特定上下文出现的概率，展示最佳分类器示例，以及讨论最大可能性原则在句子填充中的应用。

摘要由CSDN通过智能技术生成

贝叶斯NLP迷你项目

计算

练习: Calculations
让我们计算一下上一页中提到问题。这里是一段你老板的留言：

“So if you could just go ahead and pack up your stuff and move it down there, that would be terrific, OK?”
基于上面这句话，计算下列情况的概率：

单词 you 跟在单词 if 后面的概率是多少
在句子中，随机选择一个词，选到 you 的概率是多少
在句子中，随机选择一个词，选到 if 的概率是多少

最佳分类器示例

练习: Optimal Classifier Example
想象一下如果我们有连续的两个缺失的单词。与其在第一个空位选择可能性最大的那个单词，然后基于这个单词来预测第二个单词，我们还可以计算可能出现在第一个空位所有单词的可能性。

例如，在下列句子中：

“For ——”

在前面的句子中：

你预测第二个空格应该填哪个单词？

填这个单词的概率是多少？

最大可能性

sample_memo = '''
Milt, we're gonna need to go ahead and move you downstairs into storage B. We have some new people coming in, and we need all the space we can get. So if you could just go ahead and pack up your stuff and move it down there, that would be terrific, OK?
Oh, and remember: next Friday... is Hawaiian shirt day. So, you know, if you want to, go ahead and wear a Hawaiian shirt and jeans.
Oh, oh, and I almost forgot. Ahh, I'm also gonna need you to go ahead and come in on Sunday, too...
Hello Peter, whats happening? Ummm, I'm gonna need you to go ahead and come in tomorrow. So if you could be here around 9 that would be great, mmmk... oh oh! and I almost forgot ahh, I'm also gonna need you