使用ltp时，发现有些词没有切开，比如“信用卡拼音”

最新推荐文章于 2020-04-24 15:03:52 发布
最新推荐文章于 2020-04-24 15:03:52 发布
阅读量1k 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zh515858237/article/details/70767379
版权

解决办法：

使用自定义词典，加入"信用卡"、"拼音"这两个词到user.dict，一个词一行

echo "信用卡拼音"  | ./cws_cmdline  --segmentor-model cws.model --segmentor-lexicon user.dict

就能切开了


hit56笔记
关注
使用ltp进行三元组提取的实战代码
herosunly的博客
04-20 11万+
本文主要介绍了使用ltp进行三元组提取的实战代码，希望对学习三元组提取的同学们有所帮助。需要说明的是，ltp进行三元组提取不需要数据标注，效果并非特别好，可作为baseline进行使用。 文章目录 1. 前言 2. 安装方法 3. 实战代码 3.1 提取三元组 3.2 根据三元组重构文本
Ltp介绍及实践（20200925）
WallE
09-25 4470
Ltp中源代码和模型包括：中文分词、词性标注、未登录词识别、依存句法、语义角色标注几个模块。 目录 1、标注集合 分词标注集 词性标注集 命名实体识别标注集 依存句法关系 语义角色类型 1、标注集合 分词标注集 标记 含义 举例 B 词首 __中__国 I 词中 哈__工__大 E
LTP与THULAC分词用户字典使用技巧
XAKK的博客
04-19 2271
最近做关系抽取时需要用到分词工具。 尝试对下面一句话进行分词： 韩国瑜此前就曾邀鸿海来高雄投资。 分词后： 韩国 瑜 此前 就 曾 邀鸿 海 来 高雄 投资 。 分词存在将（韩国瑜）分词为（韩国 瑜）的情况，而我希望的是不希望把“韩国瑜”三个字分开。 此时可以借助 thulac 的字典功能。 sent = "韩国瑜此前就曾邀鸿海来高雄投资。" segment = thulac...
fudanNLP(fnlp)添加自定义字典
ER
04-22 6404
fnlp目前找到的接口方便的开源的NLP开源工具 StanfordNLP Hanlp FudanNLP NLTK LTP 由于StanfordNLP中文包配置较困难，使用fnlp做分词加语义 考虑语义依存时，算法几乎都如出一辙的HMM，所以暂且认为模型参数问题可以用scale的数据量弥补。fnlp这是一段具有分词，实体识别，语义依存功能的代码import org.fnlp.nlp.cn
中文句法分析及LTP使用
Asia-Lee
10-24 2万+
目录 一、中文句法分析内容概述 二、基于Python的LTP句法分析 1、LTP基础 2、pyltp安装 3、pyltp实现句法分析 三、基于C++的LTP句法分析 1、LTP源码和模型 2、LTP的C++源码编译及测试 3、在Linux下使用动态库生成可执行程序 4、 构建基于LTP的句法分析类Parsing 5、使用Parsing类实现句法分析 四、LTP标注集参考 ...
LTP工具说明
热门推荐
kernel_learner的专栏
11-29 4万+
LTP工具说明   1.... LTP测试套件...................................................... 3 1.1        简介.......................................................................................................
哈工大自然语言处理工具箱之ltp在windows10下的安装使用教程
09-16
### 哈工大自然语言处理工具箱之LTP在Windows 10下的安装与使用教程 #### 一、概述 LTP（Language Technology Platform）是由哈尔滨工业大学社会计算与信息检索研究中心开发的一款开源的自然语言处理工具包。它...
LTP测试工具使用.docx
最新发布
05-07
### LTP测试工具知识点 #### 1. LTP简介 - **定义与目的**：LTP（Linux Test Project）是一项由SGI、IBM、OSDL和Bull共同推动的项目，旨在为开源社区提供一套全面的测试套件，用于验证Linux系统的可靠性、健壮性和...
ltp.rar_DTN传输层协议ltp的opnet代码_LTP OPNET_ltp_ltp dtn_opnet ltp
09-21
通过OPNET进行LTP的仿真，可以帮助研究人员和工程师评估不同网络条件下的LTP性能，比如传输效率、丢包率、延迟和吞吐量。此外，OPNET还可以用来测试LTP的各种优化策略，例如选择性重传、速率控制和拥塞避免算法。 ...
linux下LTP测试环境使用说明
12-29
### Linux下LTP测试环境使用说明 #### 一、LTP工具简介 LTP (Linux Test Project) 是由SGI、IBM、OSDL和Bull等机构合作开发的一个开源项目，旨在为开源社区提供一套全面的测试套件，用于验证Linux操作系统的可靠性...
哈工大LTP和中科院NLPIR中文分词比较
竹聿Simon的专栏
04-17 2万+
个人实验总结，仅供参考。 1.LTP有自动分句功能，NLPIR没有分句功能； LTP的分句是根据中文标点里的句号、问号、感叹号、分号、省略号。 2.NLPIR分词有两种方式，分词结果完全一致。 （1）利用分词函数NLPIR_ParagraphProcess； （2）利用NLPIR_FileProcess对整个文本进行分词。 其中第（2）种有时候会出现bug，分词进行到文
HanLP用户自定义词典源码分析
weixin_34306676的博客
05-04 354
HanLP用户自定义词典源码分析 1. 官方文档及参考链接 关于词典问题Issue，首先参考：FAQ 自定义词典其实是基于规则的分词，它的用法参考这个issue 如果有些数量词、字母词需要分词，可参考:P2P和C2C这种词没有分出来，希望加到主词库 关于词性标注：可参考词性标注 ​ 2. 源码解析 分析 com.hankcs.demo包下的DemoCustomDictionary.java 基...
HanLP vs LTP 分词功能测试
weixin_33980459的博客
04-19 247
文章摘自github,本次测试选用 HanLP 1.6.0 , LTP 3.4.0测试思路使用同一份语料训练两个分词库，同一份测试数据测试两个分词库的性能。语料库选取1998年01月的人民日报语料库。199801人民日报语料该词库带有词性标注，为了遵循LTP的训练数据集格式，需要处理掉词性标注。测试数据选择SIGHan2005提供的开放测试集。SIGHan200...
pyhanlp用户自定义词典添加
明月三千里的专栏
05-16 5625
pyhanlp是python版封装的的HanLP，项目地址：https://github.com/hankcs/pyhanlp经过测试，HanLP比nltk在中文分词和实体识别方面都更好用。如何向pyhanlp添加自定义的词典？1....
中文分词评测
riario的博客
10-17 3160
中文分词评测4种基于Python第三方库的的中文分词方案的速度和精度。 - jieba https://github.com/fxsjy/jieba - THULAC-Python https://github.com/thunlp/THULAC-Python - pynlpir https://github.com/tsroten/pynlpir - pyltp https://githu
使用stanford nlp时强制自定义分词
西瓜树的博客
02-27 2395
本文章适用于这样的情景： 1. 不仅仅使用stanford nlp做分词，而是用它做句法分析或依存分析等； 2. 对默认的分词结果不满意，想要加入强制的自定义词典； 一、stanford nlp的基本用法 // build pipeline StanfordCoreNLP pipeline = new StanfordCoreNLP( PropertiesUtils.asProperties( ...
NLP笔记2_自定义词性与字典的实现
xiaobaizaza_Ry的博客
04-24 1015
NLP笔记2_自定义词性与字典的实现 怎么实现自定义词性，哎呀愁。看了一篇论文，作者是使用LTP实现的，但是作者没有仔细说明如何实现。在网上也看其他的博客，但是暂时还是找不到相对应较好的解决方法。希望其他博友如果知道，请指点一二。（未来还得继续学习） LTP没有办法实现，我就转向简单的jieba了，想说jieba一点也不结巴。 Step1：准备自己的字典 为了作业，收集了一些词汇，准备了自...
Linux LTP测试环境详尽配置与使用教程
本文档详细介绍了在Linux环境下如何设置和使用LTP (Linux Test Project) 测试套件。LTP是一个用于评估操作系统内核稳定性和功能完备性的强大工具包，它包含了各种针对不同功能模块的测试项目。 1. LTP工具说明部分...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值