第三次课后作业词频统计

学号:2017***7044
姓名:陈品潼
码云仓库:https://gitee.com/cptcpt/word_frequency/tree/SE7044/

2) 程序分析,对程序中的四个函数做简要说明。要求附上每一段代码及对应的说明。
def process_file(dst): # 读文件到缓冲区
try: # 打开文件
fi = open(dst)
except IOError as s:
print (s)
return None
try: # 读文件到缓冲区
bvffer = fi.read()
except:
print ("Read File Error!")
return None
fi.close() #关闭文件
return bvffer
-------------------------------------------------------------------------------------------------
def process_buffer(bvffer):
if bvffer:
word_freq = {}
# 下面添加处理缓冲区 bvffer代码,统计每个单词的频率,存放在字典word_freq
for i in bvffer.strip().split():
word = i.strip(punctuation+' ')
if word in word_freq.keys():
word_freq[word]+=1
else:
word_freq[word]=1
return word_freq #返回字典


def output_result(word_freq):
if word_freq:
sorted_word_freq = sorted(word_freq.items(), key=lambda v: v[1], reverse=True)
for item in sorted_word_freq[:10]: # 输出 Top 10 的单词
print(item)


if name == "main":
import argparse
parser = argparse.ArgumentParser()
parser.add_argument('dst')
args = parser.parse_args()
dst = args.dst
bvffer = process_file(dst)
word_freq = process_buffer(bvffer)
output_result(word_freq)

3) 性能分析结果及改进。
指出执行次数最多的代码,执行时间最长的代码。
1627111-20190408161138313-349345567.jpg

给出改进优化的方法以及你的改进代码
4) 程序运行命令、运行结果截图以及改进后的程序运行命令及结果截图 。
1627111-20190408161411926-485784067.jpg

1627111-20190408161500099-1268842033.jpg

1627111-20190408161511835-624899953.jpg

5) 给出你对此次任务的总结与反思。
自己在python打代码费时间较多,做了单元验证,统计词频。

转载于:https://www.cnblogs.com/cptcpt/p/10671594.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值