Python文件处理

一、文件的定义

所谓文件就是操作系统提供给应用程序或者用户来操作硬盘的接口和虚拟概念。

二、如何用文件操作电脑硬盘

应用程序运行过程中产生的数据最先都是存放于内存中的,若想永久保存下来,必须要保存于硬盘中。应用程序若想操作硬件必须通过操作系统,而文件就是操作系统提供给应用程序来操作硬盘的虚拟概念,用户或应用程序对文件的操作,就是向操作系统发起调用,然后由操作系统完成对硬盘的具体操作

三、文件操作的基本流程

 1. 打开文件,由应用程序向操作系统发起系统调用open(...),操作系统打开该文件,对应一块硬盘空间,并返回一个文件对象赋值给一个变量f,(类似于定义变量,将open这个命令对应的操作赋值给变量名f,以后通过调用f,就可以调用open命令)。f=open('a.txt','r',encoding='utf-8') 是由操作系统打开文件,如果打开的是文本文件,会涉及到字符编码问题,如果没有为open指定编码,那么打开文本文件的默认编码很明显是操作系统说了算了,操作系统会用自己的默认编码去打开文件,在windows下是gbk,在linux下是utf-8。这就用到了字符编码的知识:若要保证不乱码,文件以什么方式存的,就要以什么方式打开。

1.1 open命令的语法格式:

open(r‘文件路径(相对路径或者绝对路径)’ , '读写模式‘  ,enconding ='编码方式')

其中文件路径前面加r是为了取消路径中/和字母产生的特殊含义,读写模式详见下文分解

2. 调用文件对象下的读/写方法,会被操作系统转换为读/写硬盘的操作
data1=f.read()       date2 = f.write()

3. 向操作系统发起关闭文件的请求,回收系统资源
f.close()

四、资源回收

资源回收包括两部分,f.close() 和del f  ,在python中有自动的垃圾回收机制帮我们完成del f (垃圾回收机制:1,引用计数;2,标记清楚;3,分代回收),但是在del f 之前我们要先完成f.close(),负责会导致打开的文件一直打开,从而浪费资源,这就要求我们每次open文件以后,都要记得完成f.close(),为了防止遗忘,于是Pythonn内置了with语法管理上下文,默认在打开文件命令执行完以后关闭文件。

五、with上下文管理

1、在执行完子代码块后,with 会自动执行f.close()
with open('a.txt','w') as f:
    子代码块 

 2、可用用with同时打开多个文件,用逗号分隔开即可
with open('a.txt','r') as read_f,open('b.txt','w') as write_f:  
    子代码块

六、控制文件读写的操作模式

r 只读模式

r只读模式: 在文件不存在时则报错,文件存在文件内指针直接跳到文件开头
 with open('a.txt',mode='r',encoding='utf-8') as f:
     res=f.read() # 会将文件的内容由硬盘全部读入内存,赋值给res

w 只写模式

w只写模式: 在文件不存在时会创建空文档,文件存在会清空文件,文件指针跑到文件开头
with open('b.txt',mode='w',encoding='utf-8') as f:
    f.write('你好\n')
    f.write('我好\n') 
    f.write('大家好\n')
#强调:
# 1 在文件不关闭的情况下,连续的写入,后写的内容一定跟在前写内容的后面
# 2 如果重新以w模式打开文件,则会清空文件内容

a 追加写模式

 a只追加写模式: 在文件不存在时会创建空文档,文件存在会将文件指针直接移动到文件末尾
 with open('c.txt',mode='a',encoding='utf-8') as f:
     f.write('44444\n')    \n为换行符
     f.write('55555\n')
#强调 w 模式与 a 模式的异同:
# 1 相同点:在打开的文件不关闭的情况下,连续的写入,新写的内容总会跟在前写的内容之后
# 2 不同点:以 a 模式重新打开文件,不会清空原文件内容,会将文件指针直接移动到文件末尾,新写的内容永远写在最后

r+ w+ a+ 模式

    可读可写,但在现实工作中,一般不怎么用

七、控制文件读写内容的模式

   控制文件读写共分为两个模式,t模式为字符文本模式,b模式为二进制数字模式, t,b模式均不能单独使用,必须与r/w/a之一结合使用

t模式

t(默认的):文本模式
    1. 读写文件都是以字符串为单位的     一个汉字和一个英文字母都是一个字符串,也就是一个单位
    2. 只能针对文本文件
    3. 必须指定encoding参数     存在文字编码与解码的过程,数据从内存中保存到硬盘的过程称之为编码,规定编码是按照UTF8的编码表进行转化成二进制存储,从硬盘中打开数据到内存解码的过程中,必须和存储数据的编码表一致,因此在这里只规定了编码表为UTF8,解码默认一样

t 模式:如果我们指定的文件打开模式为r/w/a,其实默认就是rt/wt/at
                 with open('a.txt',mode='rt',encoding='utf-8') as f:
                             res=f.read() 
                             print(type(res)) # 输出结果为:<class 'str'>
        
                 with open('a.txt',mode='wt',encoding='utf-8') as f:
                             s='abc'
                             f.write(s) # 写入的也必须是字符串类型
    
 #强调:t 模式只能用于操作文本文件,无论读写,都应该以字符串为单位,而存取硬盘本质都是二进制的形式,当指定 t 模式时,内部帮我们做了编码与解码,因此我们才需要指定encoding参数

b模式

b:二进制模式:
   1.读写文件都是以字节bytes/二进制为单位的    一个汉字三个字节,一个英文字母一个字节
   2. 可以针对所有文件
   3. 一定不能指定encoding参数     直接将硬盘中的二进制数据(经过UTF8转化的)搬运到内存中,因此该模式下一定不能指定encoding参数,编码表不能翻译非文本的数据产生的二进制数据。

 b: 读写都是以二进制位单位
                         with open('1.mp4',mode='rb') as f:
                                     data=f.read()
                                     print(type(data)) # 输出结果为:<class 'bytes'>

                         with open('a.txt',mode='wb') as f:
                                     msg="你好"
                                     res=msg.encode('utf-8') # res为bytes类型
                                     f.write(res) # 在b模式下写入文件的只能是bytes类型

# 强调:b模式对比t模式
1、在操作纯文本文件方面  

t模式帮我们省去了编码与解码的环节,

b模式则需要手动编码与解码,所以此时t模式更为方便
2、针对非文本文件(如图片、视频、音频等)只能使用b模式

八、操作文件的方法

上文讲述了打开文件,以及控制文件打开的方式,即只读,只写,追加写等,但文件以某种模式打开以后,我们需要的不仅仅是以某种模式打开文件,更重要的是需要在该打开模式下,对文件进行操作

读操作

f.read()  # 读取所有内容,执行完该操作后,文件指针会移动到文件末尾
f.readline()  # 读取一行内容,光标移动到第二行首部
f.readlines()  # 读取每一行内容,存放于列表中

f.readable()  # 文件是否可读

# 强调:
# f.read()与f.readlines()都是将内容一次性读入内容,如果内容过大会导致内存溢出,若还想将内容全读入内存,则必须分多次读入,有两种实现方式:
# 方式一
                with open('a.txt',mode='rt',encoding='utf-8') as f:
                            for line in f:        #python 对read()做了优化,支持for循环,从而实现边读边回收
                                    print(line) # 同一时刻只读入一行内容到内存中

# 方式二
                        with open('1.mp4',mode='rb') as f:
                                    while True:
                                        data=f.read(1024) # 同一时刻只读入1024个Bytes到内存中,其中1024为参数,支持自定义一次读取多少个单位,在b模式下,以字节为单位,一个汉字三个字节,英文字母一个字节
                                        if len(data) == 0:
                                                    break
                                        print(data)
        

写操作

f.write('任巍峰\n大帅哥')  # 针对文本模式的写,需要自己写换行符

f.write('任巍峰\n大帅哥'.encode('utf-8'))  # 针对b模式的写,需要自己写换行,文本文件需要手动编码

f.writelines(['任巍峰\n','大帅哥\n'])  # 文件模式,一次性将列表中的元素写文本,t模式下可以写入非二进制的字符串

f.writelines([bytes('任巍峰\n',encoding='utf-8'),'大帅哥\n'.encode('utf-8')]) #b模式下非文本文件只需要写入二进制数字

九、主动控制文件内指针的移动

大前提:文件内指针的移动都是Bytes为单位的,唯一例外的是t模式下的read(n),n以字符为单位
                with open('a.txt',mode='rt',encoding='utf-8') as f:
                             data=f.read(3) # 读取3个字符
    

                with open('a.txt',mode='rb') as f:
                             data=f.read(3) # 读取3个Bytes   三个字节为一个汉字


# 之前文件内指针的移动都是由读/写操作而被动触发的,若想读取文件某一特定位置的数据,则则需要用f.seek方法主动控制文件内指针的移动,详细用法如下:

f.seek(指针移动的字节数,模式控制): 
 模式控制:

        强调:其中0模式可以在t或者b模式使用,而1跟2模式只能在b模式下用

0模式的使用 

0: 默认的模式,该模式代表指针移动的字节数是以文件开头为参照的

 a.txt用utf-8编码,内容如下(abc各占1个字节,中文“你好”各占3个字节)
                abc你好

                 with open('a.txt',mode='rt',encoding='utf-8') as f:
                            f.seek(3,0)     # 参照文件开头移动了3个字节
                            print(f.tell()) # 查看当前文件指针距离文件开头的位置,输出结果为3
                            print(f.read()) # 从第3个字节的位置读到文件末尾,输出结果为:你好
    # 注意:由于在t模式下,会将读取的内容自动解码,所以必须保证读取的内容是一个完整中文数据,否则解码失败

                        with open('a.txt',mode='rb') as f:
                                    f.seek(6,0)
                                    print(f.read().decode('utf-8')) #输出结果为: 好

1模式的使用

 1模式代表指针移动的字节数是以当前所在的位置为参照的

                with open('a.txt',mode='rb') as f:
                   f.seek(3,1) # 从当前位置往后移动3个字节,而此时的当前位置就是文件开头
                    print(f.tell()) # 输出结果为:3
                    f.seek(4,1)     # 从当前位置往后移动4个字节,而此时的当前位置为3
                    print(f.tell()) # 输出结果为:7

2模式的使用

 2模式代表指针移动的字节数是以文件末尾的位置为参照的

a.txt用utf-8编码,内容如下(abc各占1个字节,中文“你好”各占3个字节)
                                abc你好
                        with open('a.txt',mode='rb') as f:
                            f.seek(0,2)     # 参照文件末尾移动0个字节, 即直接跳到文件末尾
                            print(f.tell()) # 输出结果为:9
                            f.seek(-3,2)     # 参照文件末尾往前移动了3个字节
                            print(f.read().decode('utf-8')) # 输出结果为:好

十、文件修改

文件对应的是硬盘空间,硬盘不能修改对应着文件本质也不能修改,那我们看到文件的内容可以修改,是如何实现的呢?大致的思路是将硬盘中文件内容读入内存,内存中的数据是可以修改的,在内存中修改完毕后再覆盖回硬盘
具体的实现方式分为两种:

方式一:

# 实现思路:将文件内容发一次性全部读入内存,然后在内存中修改完毕后再覆盖写回原文件
# 优点: 在文件修改过程中同一份数据只有一份
# 缺点: 会过多地占用内存
                with open('db.txt',mode='rt',encoding='utf-8') as f:
                            data=f.read()

                with open('db.txt',mode='wt',encoding='utf-8') as f:
                            f.write(data.replace('kevin','SB'))

方式二:

# 实现思路:以读的方式打开原文件,以写的方式打开一个临时文件,一行行读取原文件内容,修改完后写入临时文件...,删掉原文件,将临时文件重命名原文件名
# 优点: 不会占用过多的内存
# 缺点: 在文件修改过程中同一份数据存了两份
        import os

        with open('db.txt',mode='rt',encoding='utf-8') as read_f,

                 open('.db.txt.swap',mode='wt',encoding='utf-8') as wrife_f:
                            for line in read_f:
                                        wrife_f.write(line.replace('SB','kevin'))

          os.remove('db.txt')
          os.rename('.db.txt.swap','db.txt')

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值