python读取文件按行分割字符串_python实现按行切分文本文件的方法

本文实例讲述了python实现按行切分文本文件的方法。分享给大家供大家参考,具体如下:

python脚本利用shell命令来实现文本的操作, 这些命令大大减少了我们的代码量。

比如按行切分文件并返回切分后得到的文件列表,可以利用内建的split命令进行切分。为了返回得到的文件列表名,可以先将文件切分到自建的子目录中,然后通过os.listdir获取所有文件,再将这些文件移到上一级目录(即函数参数指定的新目录),删除自建子目录,最后返回该文件名列表。

代码如下,如发现问题欢迎指正:

# 创建新路径

def make_dirs(path):

if not os.path.isdir(path):

os.makedirs(path)

# 获取文件的行数

def get_total_lines(file_path):

if not os.path.exists(file_path):

return 0

cmd = 'wc -l %s' % file_path

return int(os.popen(cmd).read().split()[0])

# 函数split_file_by_row: 按行切分文件

# filepath: 切分的目标文件

# new_filepath: 生成新文件的路径

# row_cnt: 每个文件最多包含几行

# suffix_type: 新文件后缀类型,如两位字母或数字

# return: 切分后的文件列表

def split_file_by_row(filepath, new_filepath, row_cnt, suffix_type='-d'):

tmp_dir = "/split_file_by_row/"

make_dirs(new_filepath)

make_dirs(new_filepath+tmp_dir)

total_rows = get_total_lines(filepath)

file_cnt = int(math.ceil(total_rows*1.0/row_cnt))

command = "split -l%d -a2 %s %s %s" % (row_cnt, suffix_type, filepath, new_filepath+tmp_dir)

os.system(command)

filelist = os.listdir(new_filepath+tmp_dir)

command = "mv %s/* %s"%(new_filepath+tmp_dir, new_filepath)

os.system(command)

command = "rm -r %s"%(new_filepath+tmp_dir)

os.system(command)

return [new_filepath+fn for fn in filelist]

希望本文所述对大家Python程序设计有所帮助。

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
以下是一个Python类,可将给定的文本文件内容根据指定的分割字符数目区间进行随机换行切分: ```python import random class TxtLineRandomSplitter: def __init__(self, filename, minchars, maxchars): self.filename = filename self.minchars = minchars self.maxchars = maxchars def readlines(self): with open(self.filename, 'r', encoding='utf-8') as f: return f.readlines() def generate_random_line_splits(self, line): splits = [] start = 0 while start < len(line): end = start + random.randint(self.minchars, self.maxchars) if end >= len(line): end = len(line) - 1 while end > start and line[end] != ' ': end -= 1 splits.append(line[start:end]) start = end + 1 return splits def split_lines(self): lines = self.readlines() split_lines = [] for line in lines: split_lines += self.generate_random_line_splits(line) return split_lines ``` 上面的类 `TxtLineRandomSplitter` 接受三个参数: - `filename`:文本文件的文件名,需要是一个字符串 - `minchars`:最小的字符数目,用于随机决定每行的分割位置 - `maxchars`:最大的字符数目,用于随机决定每行的分割位置 使用该类的方式如下: ```python splitter = TxtLineRandomSplitter('example.txt', 50, 70) split_lines = splitter.split_lines() for line in split_lines: print(line) ``` 其中,`example.txt` 是要分割文本文件,`50` 和 `70` 分别是分割字符数目区间的最小值和最大值。该类会读取 `example.txt` 中的所有行,将各行随机分割成多个子行,并将所有子行存储在一个列表中 `split_lines`,最后逐行输出所有子行。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值