Python编程实例03——对英文文本进行分词

系列目录

上一篇：Python编程实例02——实现斐波那契数列

---

---

前言

关键词：文本分词、split()函数、sort()函数和sorted()函数

---

一、编程要点

1、split()函数

实现字符串分割的函数有两种用法，如下：

a、单个分隔符分割

vstring = '人生苦短,我用Python!'
#调用split()函数，返回值是一个list类型
vret = vstring.split(',')
print(vret)
print(len(vret))
#打印出
#['人生苦短', '我用Python!']
#2
#------------------------------------
vret2 = vstring.split(',!')
print(vret2)
#打印出：['人生苦短,我用Python!']
print(len(vret2))
#打印出：1

由以上样例代码可以看出，split()函数把传入的参数（字符）当成一个整体的分割符。要想应用多个分隔符分别对字符串进行分割，要用到re模块中的split()函数。

b、多个分割符分割

#导入模块
import re
#字符串
vstring = '人生苦短，我用Python!Python高效、优雅，很多人喜欢。OK'
#'[，!、。]'，是第一个参数，注意其格式
vret =