【实例】用cmd 引用 java 生成 conll文件（stanford-corenlp）

最新推荐文章于 2021-07-13 11:51:54 发布
最新推荐文章于 2021-07-13 11:51:54 发布
阅读量966 收藏 2
点赞数
分类专栏： cmd conll
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_19741181/article/details/79411181
版权
这篇博客演示了如何在命令行（CMD）环境下，利用Java运行StanfordCoreNLP工具，进行文本的词法分析、句子分割和词性标注，并将结果输出为CONLL格式。通过指定输入文件、输出格式和参数，成功处理了英文文本并生成了CONLL文件。
摘要由CSDN通过智能技术生成

java -cp "*" -Xmx500m edu.stanford.nlp.pipeline.StanfordCoreNLP -annotators tokenize,ssplit,pos -file english.txt -outputFormat conll

-----------------------------------------------------------------------------------

E:\cornlp\stanford-corenlp-full-2018-01-31>java -cp "*" -Xmx500m edu.stanford.nlp.pipeline.StanfordCoreNLP -annotators tokenize,ssplit,pos -file english.txt -outputFormat conll
[main] INFO edu.stanford.nlp.pipeline.StanfordCoreNLP - Adding annotator tokenize
[main] INFO edu.stanford.nlp.pipeline.TokenizerAnnotator - No tokenizer type provided. Defaulting to PTBTokenizer.
[main] INFO edu.stanford.nlp.pipeline.StanfordCoreNLP - Adding annotator ssplit
[main] INFO edu.stanford.nlp.pipeline.StanfordCoreNLP - Adding annotator pos
[main] INFO edu.stanford.nlp.tagger.maxent.MaxentTagger - Loading POS tagger from edu/stanford/nlp/models/pos-tagger/english-left3words/english-left3words-distsim.tagger ... done [2.0 sec]

最低0.47元/天 解锁文章
神创
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
conll-2012
01-11
OntoNotes 5.0的中文部分包括250K字的新闻专线数据，270K字的广播新闻和170K的广播会话。 新闻专线的数据来自中国树库5.0。 250K包括100K的新华新闻数据（chtb_001.fid到chtb_325.fid）和来自Sinorama新闻杂志的150K数据（chtb_1001.fid到chtb_1078.fid）。 广播新闻数据是来自TDT4的274K字，并且是从LDC为自动内容提取（ACE）程序注释的数据中选择的。已将这些文件的编号chtb_2000.fid分配给chtb_3145.fid。 广播对话数据是170K字，取自LDC的GALE数据。 50K的原始中文数据也用英文注释，另外55K的中文数据代表原始英语广播对话翻译成中文。 Web数据包括215K令牌，其中15K来自P2.5评估，86K来自Dev09数据。此外，110K的Web数据由40K并行中文源数据和70K并行英文原始数据组成。 电话会话语料库包括大约100K的中文CallHome数据，用解析，命题，名称和共同参考信息注释。
Stanford CoreNLP生成CoNLL数据格式
Gamma Gao的专栏
11-13 7027
Stanford CoreNLP + Java 8: https://stanfordnlp.github.io/CoreNLP/index.html 斯坦福大学CoreNLP提供了一套人类语言技术工具。它可以给出词的基本形式，词类，是否是公司名称，人名等，规范日期，时间和数量，根据短语和句法依赖标记句子的结构，指出哪些名词短语是指相同的实体，表示情感，提取实体提及的特定或开放的类关系，得到人
pyconll:一个最小的纯Python库，可与CoNLL-U格式的文件对接
05-08
pyconll 使用熟悉的python语法轻松处理CoNLL文件。 链接 安装 与大多数python软件包一样，只需使用pip从PyPi安装即可。 pip install pyconll pyconll也可以在pyconll频道上作为pyconll软件包使用。 目前，conda上仅提供软件包2.2.0和更高版本。 conda install -c pyconll pyconll pyconll从版本3.0.0开始支持Python 3.6和更高版本。 通常，pyconll会将开发工作集中在官方支持的python版本上。 Python 3.5于2020年10月终止支持。 用 该工具旨在成为一种广泛使用的编程语言中的最低限度，低级，富有表现力和实用的库。 pyconll在原始的CoNLL批注之上创建一个瘦API，该API很简单直观。 它具有以下功能： 针对所有UD v2.x版本的常规C
conllu:用于处理conllu文件JavaScript工具
05-16
康鲁 Conllu是一个JavaScript库，能够处理CoNLL-U格式的文件，包括在句子中创建和操纵多词标记。 安装 Node.js Conllu在npm上可用。 npm install conllu 然后，需要conllu库。 var conllu = require('conllu') 浏览器 要在浏览器中使用conllu，只需包含browser.js文件。 [removed][removed] conllu库将位于window.conllu 。 概述 ### Conllu对象Conllu对象是最高级别的对象，并允许在完整文件级别进行操作。 该对象包括一组语句以及一些功能，这些功能允许从现有conllu文件中获取信息，拆分和合并语句以及导出为conllu格式。 要从现有文件创建Co
conll2000 conll2002 conll2003 conll2007 conll2012
05-10
本人将conll相关的数据集做了整理,大家可以下载使用,我也写了相关的数据集的说明,也在我的博客里.希望大家有兴趣的可以一块交流学习.
stanford-corenlp-3.9.2-models.jar
05-09
stanford-corenlp-3.9.2-models.jar
stanford-corenlp-full-2015-12-09.zip
07-19
使用"stanford-corenlp-full-2015-12-09"这个版本的用户，可以通过Java API或命令行界面与工具包进行交互。在实际应用中，开发者通常会结合自己的项目需求，选择合适的工具包功能进行集成，以实现高效且精准的文本...
stanford-corenlp-full-2018-10-05.zip
05-07
StanfordCoreNLP适用于以下情形: 一个具有广泛语法分析工具集成的NLP工具包； 一种广泛应用于生产中的快速、健壮的任意文本注释器； 一个现代化的具有全面高质量的文本分析功能的、定期更新的软件包
stanford-corenlp-full-2014-08-27
08-27
这个压缩包不仅包含CoreNLP的Java库，还可能包含相关的模型文件、配置文件和示例代码。用户可以使用这些资源来搭建自己的NLP应用，无论是简单的分词任务，还是复杂的语义分析。通过Java API，开发者可以轻松地将这些...
word源码java-node-stanford-corenlp:斯坦福CoreNLP的简单node.js包装器
06-05
word源码java 节点斯坦福corenlp 不再维护。 斯坦福 CoreNLP 的简单 node.js 包装器。 快速演示 下载 将standford-corenlp-full-2015-04-20.zip的内容解压到本项目根目录的corenlp目录下 运行node examples/...
在python中使用stanford CoreNLP coreference
Hallywood的博客
05-01 3769
在python中使用stanford CoreNLP coreference有三种方法1. 使用命令调用的方式如下：（奇怪的是我的没有任何输出，先挖个坑，等找到原因再来补充）import subprocess subprocess.call(['java','-cp','F:/Program Files/jars/stanford-corenlp-full-2018-02-27/*','-Xm...
windows下使用stanfordcorenlp报错：找不到或无法加载主类 edu.stanford.nlp.process.PTBTokenizer
weixin_40520161的博客
05-20 4960
运行python make_datafiles.py /path/to/cnn/stories /path/to/dailymail/stories，报上图所示错误。再尝试运行echo “Please tokenize this text.” | java edu.stanford.nlp.process.PTBTokenizer 同样报错。网上搜到的方法修改环境变量CLASSPATH，但没有...
jave使用corenlp
ltochange的博客
07-13 800
corenlp斯坦福大学开发的基于java语言的自然语言处理工具，能够为文本多种语言学标注，包括分词，句子边界，词性标注，命名实体识别，数字与时间，句法解析（dependency and constituency parses），指代消解，情感，引用归因，关系。目前支持6种语言:阿拉伯语、汉语、英语、法语、德语和西班牙语。 属于一个原始句子，会经过上图一系列的标注处理，产生标注集合。 词性标注： 命名实体识别： 依存句法解析： 指代消解： 使用流程： （1）从官网下载并解压 CoreNLP 4.
python中yield关键字的使用（附使用场景代码--conll文本数据读取）
weixin_44607838的博客
06-07 1032
通俗理解 1.当一个函数中带有yield关键字之后，这个函数就变成了一个生成器。当我们直接调用它时，返回的是一个生成器对象。 2.那么既然它是一个生成器，那么我们可以通过循环来调用它，来执行它内部的逻辑。那么关键来了，带yield关键字的生成器它的执行逻辑是怎样的呢？ 总结来说那就是当我们在外部循环调用该生成器时，每次遇到yield关键字时，返回其后面的的返回值，一次循环结束，然后程序会停在这个地方。然后下一次循环开始的时候，程序会从上一次停止的地方开始继续执行，知道再次遇到yield关键字，返回结果，该次
standford nlp 教程
FREEDOM
03-29 9049
githubhttps://github.com/stanfordnlp/CoreNLP 官网：http://stanfordnlp.github.io/CoreNLP/simple.html 功能： SummaryAnnotator dependenciesTokenizationSentence SplittingLemmatizationParts of Spee
中文语料下Stanford CoreNLP开发环境配置和各组件使用例子
建模分析师胡选来
03-16 7203
********开发环境和组件使用例子************* 1. IntelliJ IDEA中建立maven工程。 2. pom.xml内容： ---------          xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"          xsi:schemaLocation="http://mav
Eclipse下使用Stanford CoreNLP的方法
技术博客
01-10 3726
关于Eclipse下使用Stanford CoreNLP的方法。 详细源码下载地址：CoreNLP官网。 关于CoreNLP详细内容：http://stanfordnlp.github.io/CoreNLP/
使用Standford coreNLP进行中文命名实体识别(NER)
liinux-Talk is cheap,show me the code.
01-16 3545
Stanford CoreNLP是一个比较厉害的自然语言处理工具，很多模型都是基于深度学习方法训练得到的。 先附上其官网链接： https://stanfordnlp.github.io/CoreNLP/index.html https://nlp.stanford.edu/nlp/javadoc/javanlp/ https://github.com/stanfordnlp/CoreNL...
【NLP公开数据集】 CoNLL-2003数据集
热门推荐
Elvira521yan的博客
06-18 1万+
CoNLL-2003命名的实体数据由八个文件组成，涵盖两种语言:英语和德语。 每种语言都包含：训练集、开发集、测试集、无标签数据；其中wu'biao
/path/to/stanford-corenlp 需要替换成 stanford-corenlp 所在的实际路径，路径一直错误
最新发布
06-08
是的，`/path/to/stanford-corenlp` 这个路径只是一个占位符，需要替换成实际的 stanford-corenlp 所在的路径。假设 stanford-corenlp 安装在 D 盘的 stanford 文件夹中，那么正确的路径应该是： ``` D:\stanford\...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值