[Python]文章关键词提取实践(1)——准备语料库
"""加载停用词"""cut和lcut方法只在返回类型上有区别。这里的pair为。"""过滤非名词、停用词及单字"""word: strflag: strword = segflag = 'n'else:continue提供一个形参pos进行词性/非词性过滤的选择。词性过滤分支过滤非名词词汇。非词性过滤则认为所有的词都是名词。"""加载数据集并切词过滤"""在中将每一句话看做一个文档。
原创
2024-01-28 17:01:50 ·
439 阅读 ·
1 评论