Python基础——Python实现文件复制和移动的高级技巧

在Python中实现文件复制和移动时，除了基本的文件读写操作外，还有一些高级技巧可以提升效率、安全性和易用性。以下是一些实现文件复制和移动的高级技巧：

1. 使用shutil模块

Python的shutil模块提供了许多高级的文件、目录、集合操作，非常适合用于文件复制和移动。

• 复制文件：使用shutil.copy(src, dst)或shutil.copy2(src, dst)。copy2会尝试保留文件的元数据（如修改时间、访问时间）。

• 移动文件：虽然shutil没有直接的“移动”函数，但shutil.move(src, dst)实际上可以完成移动操作，它会尽量进行文件的重命名（如果目标在同一文件系统中），否则就会复制文件然后删除原文件。

2. 进度条显示

在复制大文件时，显示进度条可以提高用户体验。可以使用tqdm库来方便地实现。

from shutil import copyfileobj
from tqdm import tqdm

def copy_with_progress(src, dst, chunk_size=1024*1024):
    """带进度条的文件复制"""
    with open(src, 'rb') as fsrc, open(dst, 'wb') as fdst:
        total_size = os.path.getsize(src)
        with tqdm(total=total_size, unit='B', unit_scale=True, desc=f"Copying {os.path.basename(src)}") as pbar:
            while True:
                buf = fsrc.read(chunk_size)
                if not buf:
                    break
                fdst.write(buf)
                pbar.update(len(buf))

3. 异常处理

在文件操作中，处理可能出现的异常是非常重要的。使用try...except块可以捕获和处理如文件不存在、权限不足等异常。

import shutil

try:
    shutil.copy2('source.txt', 'destination.txt')
except FileNotFoundError:
    print("源文件不存在")
except PermissionError:
    print("没有权限访问文件")
except Exception as e:
    print(f"复制文件时发生错误: {e}")

4. 并发复制

对于大量小文件的复制，使用并发可以显著提高效率。可以使用concurrent.futures模块中的ThreadPoolExecutor或ProcessPoolExecutor来实现。

from concurrent.futures import ThreadPoolExecutor
import shutil

def copy_file(src, dst):
    shutil.copy2(src, dst)

files = ['file1.txt', 'file2.txt', 'file3.txt']  # 假设这是需要复制的文件列表
dst_dir = 'destination_folder'

with ThreadPoolExecutor(max_workers=5) as executor:
    for file in files:
        executor.submit(copy_file, file, os.path.join(dst_dir, os.path.basename(file)))

5. 跨文件系统或网络移动

当移动文件跨文件系统或通过网络时，shutil.move可能会比较慢，因为它需要实际复制数据。在这种情况下，可以考虑先复制文件，然后在确认复制成功后再删除原文件。

6. 使用os模块进行更底层操作

对于更复杂的场景，如需要更细致地控制文件权限、所有权等，可以使用os模块提供的底层文件操作函数。但通常，shutil已经足够满足大多数需求。

总结

使用shutil模块进行文件复制和移动是最简单且高效的方法。结合tqdm、异常处理、并发等技术，可以进一步提升文件操作的效率和用户体验。