python学习之汉语文字分词

28 篇文章 0 订阅

本次采用python对汉语的一小句文字进行一个简单的分词;
简单介绍一下,分词所用到的—jieba:中文分词组件,可用于中文句子/词性分割、词性标注、未登录词识别,支持用户词典等功能。该组件的分词精度达到了97%以上。
安装jieba:

pip install  jieba

在这里插入图片描述
分词代码:

#!/usr/bin/env python3
# -*- coding:utf-8 -*-
u'''
Created on 2019年4月15日

@author: wuluo
'''
__author__ = 'wuluo'
__version__ = '1.0.0'
__company__ = u'重庆交大'
__updated__ = '2019-04-15'

import jieba

seg_list = jieba.cut("伟大的北京天安门", cut_all=True)
print("Full Mode:", "/ ".join(seg_list))  # 全模式

seg_list = jieba.cut("伟大的北京天安门", cut_all=False)
print("Default Mode:", "/ ".join(seg_list))  # 精确模式


seg_list = jieba.cut("这里是伟大的北京天安门")  # 默认是精确模式
print(", ".join(seg_list))

seg_list = jieba.cut_for_search("这里是伟大的北京天安门,伟大的中华人民共和国!")  # 搜索引擎模式
print(", ".join(seg_list))

if __name__ == "__main__":
pass

运行结果:
在这里插入图片描述
不用太在意圈中部分!!!

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值