使用Stanford Parser的PDFG算法进行句法分析

最新推荐文章于 2024-08-12 11:44:04 发布
最新推荐文章于 2024-08-12 11:44:04 发布
阅读量3k 收藏 6
点赞数 3
分类专栏： Natural Language Processing 文章标签： nlp nltk PCFG
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/meiqi0538/article/details/82392403
版权
本文介绍了Stanford Parser，一个由斯坦福大学开发的句法分析器，它支持多种语言，包括中文，并在nltk库中提供了Python接口。使用时需要JDK环境，并安装nltk库。通过PCFG的中文句法分析案例，以句子“我爱北京天安门”演示了如何进行分词和句法分析。
摘要由CSDN通过智能技术生成

1 Stanford Parser简介与安装

Stanford Parser顾名思义是由斯坦福大学自然语言小组开发的开源句法分析器，是基于概率统计句法分析的一个Java实现。该句法分析器目前提供了5个中文文法的实现。他的优点在于：

  • 既是一个高度优化的概率上下文无关文法和词汇化依存分析器，又是一个词汇化上下文无关文法分析器；

  • 以权威的并州树库作为分析器的训练数据，支持多语言。目前已经支持英文，中文，德文，意大利文，阿拉伯文等；

  • 提供了多样化的分析输出形式，出句法分析树外，还支持分词和词性标注、短语结构、依存关系等输出；

  • 内置了分词，词性标注，基于自定义树库的分析器训练等辅助工作。

  • 支持多平台，并封装了多种常用语言的接口，例如：java，python，php，ruby等。

本介绍是基于Stanford Parser的Python接口。由于该句法分析器底层是由java实现，因此使用时需要确保安装JDK。当前，最新的Stanford Parser版本为3.9.1，对JDK的要求是1.8以上。网上JDK的安装教程有很多，可以搜索查看，需要注意的是要配置JAVA_

了解本专栏 订阅专栏 解锁全文 超级会员免费看
智绘山河
关注
专栏目录
订阅专栏
斯坦福句法分析 java_使用Stanford Parser进行句法分析
weixin_39774491的博客
02-25 1052
一、句法分析1、定义句法分析判断输入的单词序列(一般为句子)的构成是否合乎给定的语法，并通过构造句法树来确定句子的结构以及各层次句法成分之间的关系，即确定一个句子中的哪些词构成一个短语，哪些词是动词的主语或宾语等问题。2、主流技术基于统计的方法是现阶段句法分析的主流技术。常见的概率句法分析模型包括概率上下文无关模型、基于历史的句法分析模型、层次化渐进式的句法分析模型和中心词驱动的句法分析模型。综合...
Stanford_Parser中文句法分析器使用教程
12-09
Stanford_Parser中文句法分析器教程，主要是描述中文句法依存关系
使用Stanford Parser进行句法分析
Victor-H的专栏
09-27 6073
原文：http://www.cnblogs.com/Denise-hzf/p/6612574.html 一、句法分析 1、定义 　　句法分析判断输入的单词序列（一般为句子）的构成是否合乎给定的语法，并通过构造句法树来确定句子的结构以及各层次句法成分之间的关系，即确定一个句子中的哪些词构成一个短语，哪些词是动词的主语或宾语等问题。 2、主流技术 　　基于统计的方法是现阶段句法分析的
python-NLP：4句法分析
最新发布
总裁余（余登武）博客
08-12 1112
python-NLP：4句法分析
NLP之Stanford Parser
毛球饲养员
12-05 1930
Parser主要有以下几个问题： Parser是什么？ 如何使用Stanford Parser Parser把一个句子转变为树状结构，那么这棵树具体的是怎么样，怎么操作这棵树？也就是说，怎么把这棵树用在LSTM上。这里面又包含了许多问题。 一、Definition我只知道Parser是句法分析。 专业一点的说： 句法分析判断输入的单词序列（一般为句子）的构成是否合乎给定的语法，并通过构造句法树来
StanfordParser句法分析工具指南
Qinsz_123456的博客
01-19 800
一个简易的Stanfordparser系统只需要包含四类文件，它们分别是： ①java包(最新版本为stanford-parser-3.5.2.jar) ②模板(英文：englishFactored.ser.gz/englishPCFG.ser.gz/wsjFactored.ser.gz/wsjPCFG.ser.gz； 中文：chinesePCFG.ser.gz...
stanford parser
04-10
About A natural language parser is a program that works out the grammatical structure of sentences, for instance, which groups of words go together (as "phrases") and which words are the subject or object of a verb. Probabilistic parsers use knowledge of language gained from hand-parsed sentences to try to produce the most likely analysis of new sentences. These statistical parsers still make some mistakes, but commonly work rather well. Their development was one of the biggest breakthroughs in natural language processing in the 1990s. You can try out our parser online. This package is a Java implementation of probabilistic natural language parsers, both highly optimized PCFG and lexicalized dependency parsers, and a lexicalized PCFG parser. The original version of this parser was mainly written by Dan Klein, with support code and linguistic grammar development by Christopher Manning. Extensive additional work (internationalization and language-specific modeling, flexible input/output, grammar compaction, lattice parsing, k-best parsing, typed dependencies output, user support, etc.) has been done by Roger Levy, Christopher Manning, Teg Grenager, Galen Andrew, Marie-Catherine de Marneffe, Bill MacCartney, Anna Rafferty, Spence Green, Huihsin Tseng, Pi-Chuan Chang, Wolfgang Maier, and Jenny Finkel. The lexicalized probabilistic parser implements a factored product model, with separate PCFG phrase structure and lexical dependency experts, whose preferences are combined by efficient exact inference, using an A* algorithm. Or the software can be used simply as an accurate unlexicalized stochastic context-free grammar parser. Either of these yields a good performance statistical parsing system. A GUI is provided for viewing the phrase structure tree output of the parser. As well as providing an English parser, the parser can be and has been adapted to work with other languages. A Chinese parser based on the Chinese Treebank, a German parser based on the Negra corpus and Arabic parsers based on the Penn Arabic Treebank are also included. The parser has also been used for other languages, such as Italian, Bulgarian, and Portuguese. The parser provides Stanford Dependencies output as well as phrase structure trees. Typed dependencies are otherwise known grammatical relations. This style of output is available only for English and Chinese. For more details, please refer to the Stanford Dependencies webpage. The current version of the parser requires Java 6 (JDK1.6) or later. (You can also download an old version of the parser, version 1.4, which runs under JDK 1.4, or version 2.0 which runs under JDK 1.5, but those distributions are no longer supported.) The parser also requires a reasonable amount of memory (at least 100MB to run as a PCFG parser on sentences up to 40 words in length; typically around 500MB of memory to be able to parse similarly long typical-of-newswire sentences using the factored model). The parser is available for download, licensed under the GNU General Public License (v2 or later). Source is included. The package includes components for command-line invocation, a Java parsing GUI, and a Java API. The parser code is dual licensed (in a similar manner to MySQL, etc.). Open source licensing is under the full GPL, which allows many free uses. For distributors of proprietary software, commercial licensing with a ready-to-sign agreement is available. If you don't need a commercial license, but would like to support maintenance of these tools, we welcome gift funding. The download is a 54 MB zipped file (mainly consisting of included grammar data files). If you unpack the zip file, you should have everything needed. Simple scripts are included to invoke the parser on a Unix or Windows system. For another system, you merely need to similarly configure the classpath.
BFSU_Stanford_Parser1.0（英文自动句法分析工具）
09-21
stanford parser中文句法分析时注意的问题 . 分类： NLP 2013-04-10 15:43 1091人阅读 评论(0) 收藏 举报 最近做中文自然语句语义分析方面的事情，要用到中文NLP技术，于是在stanford university的NLP小组web页上...
Python-整理了StanfordParser的部分使用方法
08-10
安装和配置完成后，我们就可以使用`stanfordnlp`进行句法分析。首先，需要初始化一个Stanford Parser模型： ```python import stanfordnlp # 加载英文模型 nlp = stanfordnlp.Pipeline(processors='tokenize,mwt,...
StanfordPaRser
10-21
StanfordPaRser
stanford-parser-3.3.1.zip
10-13
lutung.zip,javalutung的mandrill api客户端-一个java mandrill api连接器
stanford-parser-3.6.0-models.jar
05-09
stanford-parser-3.6.0-models.jar
Stanford Parser 详细使用参考
dushenzhi的专栏
11-17 7877
1、到斯坦福官方网站http://nlp.stanford.edu/software/lex-parser.shtml下载软件包，解压。 2、在eclipse中新建一个java project，把解压得到根目录下的stanford-parser.jar和stanford-parser-2.0.4-models.jar（不同版本文件名可能有差异）两个包导入项目到项目引用包中，然后把解压得到根目录下
Stanford Parser使用
yangyangrenren的专栏
02-25 5765
用Stanford Parser解析句子，生成句法树。介绍了最基本的使用方法。
NLTK+stanford parser
u012022003的专栏
12-14 1504
在使用NLTK+stanford parser进行句法分析的时候发现，包含某些字、词的句子无法进行解析（如“你”，“一样”），一开始以为是stanford parser的问题，后来才发现是nltk中stanford.py文件的某行代码作祟：stdout = stdout.replace(b'\xa0',b' ') 你：\xe4\xbd\xa0 一样：\xe4\xb8\x80\xe6\xa0\x
Stanford parser：入门使用
weixin_34055787的博客
12-04 451
一、stanford parser是什么？ stanford parser是stanford nlp小组提供的一系列工具之一，能够用来完成语法分析任务。支持英文、中文、德文、法文、阿拉伯文等多种语言。 可以从这里（http://nlp.stanford.edu/software/lex-parser.shtml#Download）下载编译好的jar包、源码、javadoc等等。 http:/...
使用指南：Stanford Parser 句法分析与可视化
"Stanford Parser是一款由斯坦福大学开发的句法分析工具，它提供了对文本进行深入语法分析的能力，包括词性标注、依存关系分析和句法树生成等。这款解析器通常需要Java Development Kit (JDK)的支持才能运行。用户...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

智绘山河

你的鼓励可能解决你下一个问题

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值