python 拆分日志文件

最新推荐文章于 2024-08-05 11:21:18 发布

韩念1

最新推荐文章于 2024-08-05 11:21:18 发布

阅读量1.3k

点赞数

分类专栏： python 文章标签： python 日志拆分

本文链接：https://blog.csdn.net/remainingsnow/article/details/78851070

版权

本文介绍如何利用Python编程实现对大型日志文件进行拆分，通过读取、处理和保存，确保日志数据的管理和分析变得更加便捷。内容包括读取大文件的策略、拆分逻辑以及文件操作的最佳实践。

摘要由CSDN通过智能技术生成

#encoding=utf-8

import os
import sys

def splitfile(filepath):

    filedir,filename = os.path.split(filepath)

    filename,extension = os.path.splitext(filename)

    filedir = os.path.join(filedir,filename)

    if not os.path.exists(filedir):
        os.mkdir(filedir)

    filenum = 0
    stream = open(filepath,'rb')

    while True:
        partfilename = os.path.join(filedir,filename + '_' + str(filenum) &