Linux文件编程：操作流程与内核机制-CSDN博客

本文链接：https://blog.csdn.net/weixin_45720999/article/details/147898172

在 Linux 操作系统中，一切皆文件，这意味着从硬盘上的数据文件、设备驱动、到管道、套接字等都以文件的形式存在。Linux 的文件系统将这些不同类型的文件统一抽象成文件对象，允许程序通过文件描述符来访问它们。

一、核心概念解析

文件描述符（File Descriptor）
- 本质：非负整数，作为用户空间程序访问内核文件对象的句柄。
- 生命周期：由open/creat创建，close释放，通过dup/fcntl可复制或修改属性。
- 内核表示：每个进程拥有独立的文件描述符表，映射到系统级的文件表（struct file）和inode表（struct inode）。
虚拟文件系统（VFS）
- 角色：统一抽象层，屏蔽底层文件系统差异（如ext4、XFS、NFS）。
- 关键结构：
  - super_block：文件系统元数据（如块大小、空闲块数）。
  - inode：文件元数据（类型、权限、时间戳、数据块指针）。
  - dentry：目录项，维护路径名到inode的映射。
  - file：表示打开的文件实例（读写位置、操作方法集）。
文件系统类型
- 磁盘文件系统（如ext4）：持久化存储数据，支持日志（journal）保证崩溃一致性。
- 内存文件系统（如tmpfs）：基于内存，速度快但重启后数据丢失。
- 网络文件系统（如NFS）：通过协议（如NFSv4）远程访问文件。

二、文件编程全流程

打开文件（open/creat）
- 用户空间调用：open("path", flags, mode)。
- 内核处理：
  1. 路径解析：VFS通过dentry逐层解析路径，定位目标inode。
  2. 权限检查：验证进程的uid/gid与文件权限（mode受umask影响）。
  3. 文件表分配：若权限通过，内核为文件分配struct file，记录读写位置、操作方法（如read_iter/write_iter）。
  4. 返回描述符：将文件表项绑定到进程描述符表，返回最小可用描述符。
读写文件（read/write）
- 用户空间调用：read(fd, buf, count)。
- 内核处理：
  1. 描述符查找：通过fd定位进程描述符表中的struct file。
  2. 调用文件系统操作：执行file->f_op->read_iter（或write_iter），进入具体文件系统实现。
  3. 数据传输：
    - 直接I/O：绕过页缓存，直接与用户缓冲区交互（需O_DIRECT标志）。
    - 缓冲I/O：数据先拷贝到页缓存，再异步写盘（提高性能，但需fsync保证持久化）。
  4. 更新偏移量：若未设置O_APPEND，更新file->f_pos为当前读写位置。
定位文件（lseek）
- 用户空间调用：lseek(fd, offset, whence)。
- 内核处理：
  1. 计算新偏移量：根据whence（SEEK_SET/SEEK_CUR/SEEK_END）调整file->f_pos。
  2. 空洞文件处理：若新偏移量超过文件末尾，扩展文件逻辑大小（不立即分配物理块）。
关闭文件（close）
- 用户空间调用：close(fd)。
- 内核处理：
  1. 释放资源：减少struct file的引用计数，若归零则释放文件表项。
  2. 通知文件系统：调用file->f_op->release，执行清理操作（如释放锁、关闭连接）。

三、内核实现细节

系统调用入口
- 机制：通过int 0x80（x86）或syscall指令（x86-64）触发软中断，切换到内核态。
- 参数传递：寄存器传递参数（如rax=系统调用号，rdi=fd，rsi=buf，rdx=count）。
页缓存（Page Cache）
- 作用：缓存磁盘数据，减少I/O次数。
- 机制：
  - 读：优先从页缓存返回数据，若未命中则触发page fault，分配物理页并从磁盘加载。
  - 写：数据先写入页缓存，由pdflush线程异步刷盘（可通过fsync强制同步）。
直接I/O（O_DIRECT）
- 适用场景：数据库等需绕过缓存、直接操作磁盘的应用。
- 限制：缓冲区需对齐到物理块大小（如512字节），否则返回EINVAL。
文件锁（flock/fcntl）
- 机制：
  - 建议锁（flock）：基于文件描述符，协调整进程间的访问。
  - 强制锁（fcntl）：基于inode，可跨进程强制实施（需文件系统支持，如ext4）。
- 实现：内核维护锁列表，通过信号量或互斥量管理并发。