NLTK学习一

最新推荐文章于 2024-04-22 02:39:54 发布

追智的

最新推荐文章于 2024-04-22 02:39:54 发布

阅读量575

点赞数

分类专栏： NLP 文章标签： NLP

本文链接：https://blog.csdn.net/u010843612/article/details/49029589

版权

NLP 专栏收录该内容

1 篇文章 0 订阅

订阅专栏

#!user/bin/python

import nltk

text = 'I am a good boy. I love programming'
sens = nltk.sent_tokenize(text)
#print sens
words = []
for sent in sens:
    words.append(nltk.word_tokenize(sent))
#print words
tags = []
for word in words:
    tags.append(nltk.pos_tag(word))
print tags
<span style="font-size:18px;">
</span>

nltk.sent_tokenize(text) #对文本按照句子进行分割

nltk.word_tokenize(sent) #对句子进行分词

nltk.pos_tag(tokens)#tokens是句子分词后的结果，同样是句子级的标注
nltk.ne_chunk(tags)#tags是句子词性标注后的结果，同样是句子级