python基础:统计小说词频

题目要求:用Python统计小说中各单词出现的频次,并按频次由高到低排序。

读取文件

f = open('C:/Users/dell/Desktop/散文.txt','r')
txt = f.read(100)
f.close()
print(txt)
f = open('C:/Users/dell/Desktop/散文.txt','r')
txt_lines = f.readlines()#换行符
f.close()
print(txt_lines)

统计txt中单词的频次

import re
f = open('C:/Users/dell/Desktop/散文.txt','r')
txt = f.read(1000)
f.close()
txt = txt.lower()
txt = re.sub('[,.?:"\'!-]',  ' ', txt)
word = txt.split()  #先用正则表达式做预处理再进行分割因为正则和lower()都是对字符串进行处理而非列表
print(txt)
print(word)

词频统计

words_fre = {}
for i in word:
    if i not in words_fre.keys():
        words_fre[i] = 1
    else:
        words_fre[i] += 1
print(words_fre)

词频排序

sorted(words_fre.items(),key = xxx,revers = True)#把字典中所有的键值对取出并进行排序的声明
  • 5
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
下面是一个统计文本文件中单词出现频率的 Python 代码: ```python def word_count(file_path): with open(file_path, 'r') as f: words = f.read().split() word_count = {} for word in words: if word not in word_count: word_count[word] = 1 else: word_count[word] += 1 return word_count file_path = 'example.txt' word_count_dict = word_count(file_path) print(word_count_dict) ``` 这个代码实现了以下功能: 1. 定义了一个函数 `word_count`,它接收一个文件路径作为参数。 2. 打开文件,并将文件内容读入字符串变量 `words` 中。 3. 定义一个空字典 `word_count`,用于存储单词及其出现的次数。 4. 遍历 `words`,对于每个单词,如果它不在 `word_count` 中,就将它加入字典并将值设为 1;否则就将它对应的值加 1。 5. 返回 `word_count` 字典。 6. 调用 `word_count` 函数,并将返回值存储在 `word_count_dict` 变量中。 7. 打印 `word_count_dict`。 这个代码的主要思路是将文件中的所有单词存储到一个字典中,字典的键是单词,值是该单词出现的次数。在遍历文件中的单词时,对于每个单词,如果它已经在字典中出现过,就将对应的值加 1,否则就将它加入字典并将值设为 1。最终,字典中存储的就是文件中每个单词出现的次数了。 需要注意的是,这个例子只是一个简单的统计单词出现频率的示例,它并没有考虑到单词的大小写、标点符号等问题。如果需要更精确地统计单词出现频率,还需要对单词进行一些预处理(比如将所有单词转换为小写),以及去除标点符号等干扰因素。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值