不同读入方式read(),readline(),readlines() 耗时对比

最新推荐文章于 2024-07-13 22:56:39 发布

#Supernova_

最新推荐文章于 2024-07-13 22:56:39 发布

阅读量634

点赞数 1

分类专栏：菜鸟学习

本文链接：https://blog.csdn.net/m0_48569082/article/details/112130409

版权

本文通过对比分析Python中的read(), readline(), readlines()三种读取文件方法，展示了在处理大量数据（如1亿次生成的data.txt文件）时的性能差异。使用装饰器进行性能测试，揭示了不同读取方式的耗时情况。" 113031175,9385327,MySQL主从复制与高可用架构解析,"['数据库', 'MySQL集群', '高可用架构', '主从复制', 'MySQL复制']

摘要由CSDN通过智能技术生成

编写一个模块，该模块实现的功能如下：
1、引入grammar模块，通过引入的grammar模块生成句子，并把生成的句子写到名字为data.txt的文件中，写1亿次。
2、参考课上讲解的代码，通过装饰器测试在几种不同读取数据（读取自己生成的data.txt文件）的方式下的运行时间。

''' 伪代码
Step1. 编写主函数导入模块生成目标文件data.txt并调用read(),readline()和readlines()
三个函数读取目标文件data.txt，接收函数返回的消耗时间并输出
with open('data,txt', 'w') as file_object:
    for i in range(100000000):
        file_object.write(' '.join(sentence()) + '\n')
    read(file)
    readline(file)
    readlines(file)
step2. 编写三个辅助函数read(),readline()和readlines(),仅以readline举例
def readline(file)
    with open(file,'r') as f:
        while True:
            line = f.readline()
            if line == '':
                break
Step3. 编辑装饰器timer(),外层函数计时，并返回调用inner()函数；内层inner提示
用户进度并实现对read(),readline()和readlines()三个辅助函数的调用，并分别返
回消耗时间
def timer(read):
    def inner(x):
        start = time.time()
        read(x)
        end = time.time()
        return end - start
    return inner
Step4. 辅助函数前分别加装time@装饰器
@timer
def read(file): ...def readline(file):...def readlines(file):
Step5. 其他优化，如时间格式化输出等
'''

from grammar import sentence
import time
#装饰器函数
def timer(read):
    def inner(x):
        print('-RUNNING-')
        start = time.time()
        read(x)
        end = time.time()
        record = end - start
        return record
    return inner

@timer
def read(file)