python哈姆雷特词频统计_Python实例10:文本词频统计

使用Python进行英文文本《哈姆雷特》和中文文本《三国演义》的词频统计。通过CalHamletV1.py计算《哈姆雷特》的前10高频词,通过CalThreeKingdomsV1.py和CalThreeKingdomsV2.py统计《三国演义》的前15高频词,排除部分常用词汇。
摘要由CSDN通过智能技术生成

Python实例10:文本词频统计

6.6.1 问题分析

在英文中文中,出现哪些词,出现多少次?

6.6.2 hamlet英文词频统计

CalHamletV1.py

6.6.3 三国演义人物出场统计

CalThreeKingdomsV1.py

CalThreeKingdomsV2.py

# CalHamletV1.py

def getText(): #获取文本,归一化处理文本

txt = open("E:\python\learn\hamlet.txt","r").read() #打开文件

txt = txt.lower() #将所有大写字母变成小写

for ch in '!"#$%&()*+,-./:;<=>?@[\\]^_{|}~"': #将文本中特殊符号替换为空格

txt = txt.replace(ch," ")

return txt

hamletTxt = getText()

words = hamletTxt.split() #采用空格将字符串中的信息进行分隔,以列表形式返回给变量

counts = {}

for word in words:

counts[word] = counts.get(word,0) + 1 #统计字数

items = list(counts.items()) #将字典类型转换成列表类型

items.sort(key=lambda x:x[1], reverse=True) #对一个列表按照键值对的2个元素的第2个元素进行排序,排序方式为由大到小的倒排

for i in r

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值