解析Python文本处理代码——以哈姆雷特小说为例统计高频词汇

前景:        

        在Python中处理文本数据是一种常见的任务,这需要使用到多种字符串操作和数据结构。本文将详细解释下面这段代码的功能,它以《哈姆雷特》为文本源,进行了一系列的处理,并统计了每个单词出现的次数。

操作步骤:

        1.打开文件

        2.读取文件内容

        3.装换为小写

        4.替换特殊操作符

        5.分词

        6.统计单词出现的次数

        7.排序后输出

具体操作

第一步打开文件:创建一个函数名,使用open()函数用于打开一个文件并赋值于它。这个函数需要两个参数:文件的路径件的编码方式。在这里,文件的路径是C:\Users\86151\Desktop\hamlet.txt.(文件的路径可以通过右击文件在文件属性中找到),编码方式是utf-8utf-8是一种可以包含任何Unicode字符的编码方式,这意味着它可以处理包括英文和中文在内的多种语言。

第二步读取文件:创建一个函数名使其被赋值使用read()函数读取整个文件的内容。

第三步转换为小写:使用lower()函数将读取到的文件内容转换为小写。这样做的目的是可以避免在统计单词时因为大小写不同而导致的重复计数。而且大小写对于一个单词来说通常不影响其意义。

第四步替换特殊符号:在这个步骤中,代码定义了一个包含许多特殊符号的字符串str2,然后遍历这个字符串,将文本中的每一个特殊符号使用replace( )函数替换为一个空格。这样做是为了清理文本,去除不需要的字符。

第五步分词:分词是将一段连续的文本分割成一个个独立的单词或词语的过程。在这里,hamlet_text.split()方法使用空格作为分隔符,将字符串分割为单词。

第六步统计单词出现次数:在这个步骤中,代码使用字典来统计每个单词出现的次数。字典的键是单词,值是出现次数。对于每个单词,如果它在字典中已经存在,就增加它的计数;如果它不存在,就将它添加到字典中并设置计数为1。这个过程使用的是字典的get函数

第七部排序和输出:最后,代码将字典转换为列表,然后按照单词出现的次数进行降序排序。然后它打印出前10个出现次数最多的单词和它们的出现次数。格式化的输出使得结果更加整齐和易读。

整段代码如下:

(本人使用的编译器是pycharm)

  • 14
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

often_

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值