使用哈工大分词引擎LTP4.2.0使用本地模型

已于 2023-06-30 16:19:58 修改
阅读量1.4k 收藏 2
点赞数 2
分类专栏： Python君 文章标签： LTP 哈工大 本地模型
于 2023-06-29 11:57:04 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yilvyangguang520/article/details/131453150
版权
本文介绍了在网络不通的情况下，如何将哈工大LTP分词引擎的在线模型转换为本地模型使用。详细步骤包括：从默认位置拷贝模型到新建的model目录并重命名，以及修改脚本以指向本地模型。提供了模型下载链接和GPU环境下的脚本示例。
摘要由CSDN通过智能技术生成

背景

最近哈工大LTP分词引擎有些问题，原因是之前模型一直用的是在线的，在Huggingface Hub上面，网络不通后，就不能用了，那如何将之前的模型放在本地来使用呢，我参考github的文档自己折腾了下，终于搞出来了，之前LTP4.0.0版本的时候，也是有折腾过这个，所以还是有些经验的。文末分享模型下载链接。

步骤

1、拷贝模型

ltp = LTP( "LTP/base2")

上面这段脚本是用默认加载模型的方式，如果之前能用的，那么模型肯定是下载到本地了，我的模型路径是下面这样的，我用的模型是base2，每个人的电脑用户名不一样，参考着改改就能找到了

C:\Users\joint\
了解本专栏 订阅专栏 解锁全文 超级会员免费看
GIS从业者
关注
专栏目录
订阅专栏
使用哈工大LTP测试分词并且增加自定义字典
yilvyangguang520的博客
08-08 2025
使用哈工大LTP测试分词并且增加自定义字典
LTP随笔——本地调用ltp之ltp4j
I_wait_for_you的专栏
04-19 1754
关于ltp本地调用的相关参考请见LTP的Git项目:https://github.com/HIT-SCIR 以下以/home/lion/Desktop路径为例下面教程中出现的具体路径以你实际配置的为准 一、安装JDK 　　方法一:使用软件源安装openjdk 　　　　sudo apt-get install openjdk-7-jdk 　　方法二:使用软件源安装sun jdk 　　　　
LTP4.2.0 哈工大分词 库python使用踩坑
最新发布
qq_40806027的博客
11-09 1378
方法 1： 使用清华源安装 LTP# 1. 安装 PyTorch 和 Transformers 依赖# 2. 安装 LTPMac BigSur 11 + Python 3.9 成功。
哈工大LTP模型
08-07
对哈工大ltp代码小结，通过整理汇总得到的几个模型代码
哈工大LTP使用
qq_41648012的博客
05-06 568
# coding=utf-8 from pyltp import SentenceSplitter from pyltp import Segmentor from pyltp import Postagger from pyltp import NamedEntityRecognizer from pyltp import Parser from nltk import DependencyGr...
哈工大【LTP】
ccbrid的博客
10-27 684
哈工大【LTP】 LTP LTP制定了基于XML的语言处理结果表示，并在此基础上提供了一整套自底向上的中文语言处理模块，以及基于动态链接库（Dynamic Link Library, DLL）的应用程序接口、可视化工具，并且能够以网络服务（Web Service）的形式进行使用。 （LTP-server） 开源代码：https://github.com/HIT-SCIR/ltp 在线文档...
ltp 分词模型
01-07
NLP ltp3.4.0 python 版本的分词模型，百度网盘下载太慢，我同时还找到了 windows 版本，具体详见： nlp demo 系列博文 https://blog.csdn.net/wangyaninglm/article/details/83479837 本下载资源免费，如有需要，请参照官网链接下载
哈工大ltp模型文件(3.4.0)
03-04
哈工大LTP，全称为哈尔滨工业大学自然语言处理与机器翻译实验室（LTP：Language Technology Platform），是中文自然语言处理领域的一个重要工具包，尤其在词法分析、句法分析、语义角色标注等方面表现出色。LTP ...
从0到1 | 手把手教你如何使用哈工大NLP工具——PyLTP！
AI科技大本营
06-29 6328
作者 | 杨秀璋来源 | CSDN 博客（CSDN id：Eastmount）（本文经作者授权，此系列文章整理后微信平台首发于AI科技大本营）【导语】此文是作者基于 Py...
哈工大语言云（LTP）本地安装使用及Python调用
热门推荐
竹聿Simon的专栏
04-17 4万+
备注：本文实验环境为64位win7系统，32位python2.7.11 哈工大LTP官方主页：http://ltp.readthedocs.org/zh_CN/latest/index.html 1.LTP下载 （1）LTP项目文件ltp-3.3.1-win-x86.zip （2）LTP模型文件3.3.1（2016年4月13日前） 下载地址参考：http://ltp.read
ltp工具包包括ltp分词模型、pos模型、ner模型、解析模型等
04-24
里面包括ltp分词模型、pos模型、ner模型、解析模型等。
自然语言处理--哈工大LTP的基本使用方法
weixin_52109411的博客
11-22 3047
导入 from pyltp import SentenceSplitter,Segmentor, Postagger, Parser,NamedEntityRecognizer, SementicRoleLabeller SentenceSplitter——————————分句 Segmentor ————————————分词（cws.model） Postagger—————————————词性标注（pos.model） Parser——————————————依存句法分析（parser.model）
哈工大开源工具PyLTP的使用方法
m0_37134868的博客
09-07 1323
(1) pip install pyltp 首先 pip 安装 pyltp 库。(2) 在 LTP 的模型页面下载模型，我直接就放在pyltp库下面了。
哈工大中文分词系统ltp4j使用总结
luoyooi的博客
07-28 1864
哈工大中文分词系统ltp4j使用总结github地址编译文件下载maven install项目引入1、添加maven依赖2、指定jar包的library_path基本使用1、工具类2、词性标注自定义词典引入 github地址 项目地址: https://github.com/HIT-SCIR/ltp4j 简介与使用: https://ltp4j.readthedocs.io/en/neoltp4j/ 分词标注集附录: 链接 编译文件下载 模型文件可在github项目下载，由于编译jar包比较麻烦，这里提供现
哈工大中文分词系统LTP（pyltp）学习笔记
ac不知深的博客
05-08 4471
一、LTP简介 介绍：语言技术平台(LTP) 提供包括中文分词、词性标注、命名实体识别、依存句法分析、语义角色标注等丰富、高效、精准的自然语言处理技术。经过 哈工大社会计算与信息检索研究中心 11 年的持续研发和推广，LTP已经成为国内外最具影响力的中文处理基础平台，曾获 CoNLL 2009七国语言句法语义分析评测总成绩第一名，中文信息学会钱伟长一等奖等重要成绩和荣誉。目前，LTP 已经被 500多家国内外研究机构和企业使用，多家大企业和科研机构付费使用。 来源：语言云。 其他不做过多讲解，直接上官网
哈工大 LTP
lihuaqinqwe的博客
06-06 5741
一.LTP事项1.LTP可以做什么？     中文文本进行分词、词性标注、依存句法分析、语义角色标注、语义依存分析。2. 注册：免费注册一个账号  网址：http://www.ltp-cloud.com/accounts/register/二.win10 下pyltp安装指南1.安装环境：win10 python3.5.22.安装步骤：（1）下载LTP项目文件   网址：https://githu...
Linux上本地使用LTP——ltp4j的使用
09-05 5524
由于要处理大量文本，所以使用LTP－CLOUD的REST API方式来处理文本效率实在很低，而且由于网络原因经常出错。好在LTP可以在本地使用，下面就介绍如何在Linux系统下进行安装配置。MacOS上没有编译成功，所以暂时不提。 一.环境： 本人系统：centOS 7 JDK版本：JDK 1.7二 .步骤： //下载 LTP下载：https://github.com/HIT-SCIR/l
哈工大依存句法分析工具——LTP的使用与安装
南木的博客
05-24 5469
更多内容请至南木博客主页查看哦 哈尔滨工业大学中文依存句法分析工具（LTP）（该工具只能进行依存句法分析） LTP LTP安装方法 LTP安装方法 使用实例请转至博客 自然语言处理（三）——句法分析与依存句法分析 ...
哈尔滨工业大学的分词论坛
ruixj的专栏
06-30 2582
 http://bbs.ir-lab.org/cgi-bin/forums.cgi?forum=3
哈工大ltp使用教程
09-11
你可以参考以下步骤来使用哈工大LTP： 1. 安装pyltp：在Linux下安装pyltp相对比较简单，只需要安装各种编译工具即可。但在Windows下，你需要首先安装Visual Studio，并进行一些配置。 2. 下载模型数据：你可以从哈工大语言云演示平台下载LTP模型数据，模型数据包括分词、词性标注、命名实体识别、依存句法分析等。 3. 使用pyltp进行自然语言处理：pyltp提供了一系列的接口和方法来处理中文文本。你可以使用分词、词性标注、命名实体识别、依存句法分析等功能。 4. 参考文档：pyltp的官方文档提供了详细的使用教程，包括安装指南、模型加载、分词、词性标注、命名实体识别、依存句法分析等方面的说明。你可以在文档中找到具体的代码示例和使用方法。 总结起来，使用哈工大LTP的步骤包括安装pyltp，下载模型数据，使用pyltp进行自然语言处理，并参考官方文档来了解具体的使用方法。希望对你有所帮助！
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

GIS从业者

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值