![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
自然语言处理
暖花_
这个作者很懒,什么都没留下…
展开
-
stanford nlp chinese jar 工具包处理中文
先下载一下核心包和中文工具包,https://stanfordnlp.github.io/CoreNLP/下载Stanford CoreNLP ,和中文支持包另外,在这个https://nlp.stanford.edu/software/,可以下载到对应的功能工具包,如果你只需要部分功能,如分词功能,那个只需要下载对应的包即可,在刚刚这个网址可以下:然后,继续记录我的S...原创 2019-05-13 14:53:02 · 2552 阅读 · 3 评论 -
NLP 文本分词标准化处理 -1.字母准变小写;2.缩写词展开;3.去除停用词;4.词干化和词性还原
分词的话,java类的split方法和StringTokenizer类可以进行简单的分词,如果不用NLP的API类时。下文的例子都属于apache的openNLP的方法,案例来源于java自然语言处理这本书import opennlp.tools.tokenize.SimpleTokenizer;/** * Filename: NlpTokenizerDeal.java ...原创 2019-05-06 16:16:06 · 2351 阅读 · 0 评论 -
NLP 文本分词 java类方法,及opennlp 示例
文章中需要的Apache openNlp jar包:openNlp下载:https://opennlp.apache.org/cgi-bin/download.cgi其他涉及的jar都是java基础类包package com.npl.demo.utils;import java.io.IOException;import java.io.StreamTokenizer;impor...原创 2019-05-06 10:47:59 · 1561 阅读 · 0 评论 -
NLP 文本分词 停用词查看网址
停用词列表可以查看网址:https://www.ranks.nl/stopwords,其中列出了集中英语及其他语言的停用词。https://www.textfixer.com/tutorials/common-english-words.txt提供了一个逗号分隔格式的英文停用词列表。...原创 2019-05-05 10:33:25 · 296 阅读 · 0 评论 -
Nlp SBD 文本断句 包含中文 和英文断句
根据目前学习,中文断句 standford nlp可以实现中文分词和断句,下面有不同api的例子,大家可以试试package com.example.utils;import java.io.BufferedOutputStream;import java.io.File;import java.io.FileInputStream;import java.io.FileOutp...原创 2019-05-13 15:54:05 · 2262 阅读 · 0 评论