初步了解中文NLP工具jieba和LTP--分词+词性标注功能

**

1.jieba分词及及词性标注功能

**

# -*- coding: utf-8 -*-
# @Time : 2021/12/22 9:28
# @Author : hp
import jieba
import jieba.posseg as pseg
#默认精确模式
txt = "小明来到了浙江省杭州市滨江区星民地铁站。他先坐6号线到奥体中心，再转乘7号线。坐了好几站，小明才到家。"
seg_list1 = jieba.cut(txt)
print("分词结果：%s"%",".join(seg_list1))
#词性
seg_list2 = pseg.cut(txt)
for u,v in seg_list2:
    print(u,'——',v)

结果：

2.LTP工具分词及词性标注

# -*- coding: utf-8 -*-
# @Time : 2021/12/21 21:51
# @Author : hp
from ltp import LTP
#默认加载small模型,首次加载自动下载，大小为164M
ltp = LTP()
#分句功能
sentence = ltp.sent_split(["小明来到了浙江省杭州市滨江区星民地铁站。他先坐6号线到奥体中心，再转乘7号线。坐了好几站，小明才到家。"])
print("分句结果：%s"%sentence)
#分词功能
# 结果使用segment进行访问，hidden用于访问每个词的隐藏层向量
segment, hidden = ltp.seg(sentence)
print("分词结果：%s"%segment)
#词性标注
pos_tags = ltp.pos(hidden)
print("对应词性：%s"%pos_tags)

结果输出：