NLP
文章平均质量分 90
continueOo
记录自己的学习之路
展开
-
知识图谱技术原理介绍
作者:王昊奋 转载请注明来自36大数据(36dsj.com)近两年来,随着Linking Open Data[1] 等项目的全面展开,语义Web数据源的数量激增,大量RDF数据被发布。互联网正从仅包含网页和网页之间超链接的文档万维网(Document Web)转变成包含大量描述各种实体和实体之间丰富关系的数据万维网(Data Web)。在这个背景下,Google、百度和搜狗等搜索引擎公司纷纷以此为转载 2017-05-26 18:47:56 · 1191 阅读 · 0 评论 -
统计自然语言处理(概率上下文无关文法)
什么是语法解析在自然语言中,句子可以分为主谓宾等表示。人们说话的方式(即使是在酒后的胡言乱语)也存在一些结构和规则。语言学中的语法分析的目标就是努力分离出这些语法结构。词语之间绝非是简单的顺序关系,它必须是描述词语如何相联系的。语法解析中有两个主要的问题: 1.句子语法在计算机中的表达与储存方式。 2.语法解析算法。对于第一个问题,最近50年间,最主要的方法就是为每个句子构造一个树结构。举例如下原创 2017-06-03 13:53:06 · 6632 阅读 · 0 评论 -
统计学自然语言处理(语义消歧)
概述本书本章描述自然语言处理中消除歧义的问题,并介绍几种重要的语义消歧算法,描述他们的资源需求和算法性能。消歧我们应该能直观的想象到就是一句话可能有几个意思。但是落实到具体细节中,我认为主要分以下几种: 1.分词的消歧,这是很常见的一个例子(南京 市 长 江大桥) 2.多义词的具体词义 3.词性的判断 对于词性的判断可以看做一个词性标注的问题词性标注的话,我们通常考虑邻近上下文。相反,如果原创 2017-06-12 11:20:31 · 7891 阅读 · 0 评论 -
HMM超详细讲解+代码
写在前面本文目标Why - 什么场景下需要HMM模型What - HMM模型的相关概念定义HMM模型的5元组HMM中的3个经典问题How - HMM模型中的3个经典问题评估评估描述评估理论推导评估实际算法前向计算python前向算法代码预测预测描述维特比算法python 维特比算法代码学习EM算法实例理解baum-welch算法的思路python代码baum-w原创 2017-09-08 13:29:55 · 77599 阅读 · 14 评论 -
统计自然语言处理(马尔可夫模型)
目的1.了解什么马尔科夫模型的三个问题 ·状态概率的计算(前向算法) ·马尔科夫译码过程(维特比算法) ·马尔科夫参数求解(EM算法 前后向算法)隐马尔科夫模型(HMM)这里笔者假设大家大致了解马尔科夫模型,即马尔科夫链的节点状态只于前N个状态相关,现实生活中常常存在一些隐藏的内容,比如3种骰子的例子,图如下: https://www.cnblogs.com/skyme/p/4651331原创 2017-06-03 13:58:19 · 1593 阅读 · 0 评论 -
讲人话系列——企业中的文本分类
概述新型深度模型天天刷屏刷榜,模型日新月异,做算法的不免感到焦虑。发现自己看论文的速度已经赶不上他们发论文的速度了。在此启发下,想写一写自己工作的思考,面对一个领域,我们如何进行技术选型,这个系列我会结合着自己的工作,帮助大家选择一个好的Baseline模型。可能这也是我的困惑,大家模型介绍的欢天喜地,并没有指出哪些适合做baseline,到头还得自己一个一个试,希望我的经验能帮助大家节省一点点...原创 2019-04-15 20:29:17 · 427 阅读 · 0 评论