文件系统写入100G文件需要多久_linux 800gb 数据cp需要多久-CSDN博客

本文链接：https://blog.csdn.net/xiaoxiaovbb/article/details/122983392

本文介绍了文件系统的概念，强调其作为数据存储容器的角色，并探讨了不同类型的硬盘（如机械硬盘和固态硬盘）的读写速度。通过示例计算了大文件的写入时间，解释了文件系统的写入和读取过程。同时，提到了`fdisk-l`和`iostat`等命令用于检查磁盘信息和性能。文章还讨论了稀疏文件的特性以及文件系统如何管理磁盘空间，包括块、inode和数据分配。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

这里面的

1、文件大小（SIZE）：119000152（单位字节）；

2、块（Blocks ）：232424（通常的 Linux一个块大小为 512 字节，也就是一个扇区的大小）

文件系统，简单理解就是来存数据的一个容器，本质和仓库没有啥区别，只不过文件系统存储的是数据。

机械硬盘的写入速度和读写速度一般约为120MB/S，500MB/s是usb接口的最大速度，机械硬盘能达到200MB/s的速度都十分优秀了，大部分都是100MB/s～150MB/s 。SATA协议的固态硬盘速度约为500MB/S，NVMe协议（PCIe 3.0×2）的固态硬盘速度约为1800MB/S，NVMe协议（PCIe 3.0×4）的固态硬盘速度约为3500MB/S。

按机械硬盘的写能力能 150 M/s，copy 一个 100G 的文件至少要 682 秒 ( 100 G/ 150 M/s )，也就是 11 分钟。

所以通常要是导出或是导入100G文件都会超过机械硬盘写入速度，具体多久还需要代码和查询数据量来定。

fdisk -l         #查看block size


iostat -d -k 1 10 
#d 表示，显示设备（磁盘）使用状态；

#-k某些使用block为单位的列强制使用Kilobytes为单位；

#1 10表示，数据显示每隔1秒刷新一次，共显示10次。

写文件流程：

先写数据：数据先按照 Block 粒度存储到磁盘的各个位置；
再写元数据：然后把 Block 所在的各个位置保存起来，即inode；

读文件流程则是：

先读inode，找到各个 Block 的位置；
然后读数据，构造一个完整的文件，给到用户；

文件 size 只是 inode 里面的一个属性，实际物理空间占用则是要看用户数据放了多少个 block ，没写数据的地方不用分配物理block块。

这样的文件其实就是稀疏文件，它的逻辑大小和实际物理空间是不相等的。

文件系统为什么和实际物理空间不同？

首先，最关键的是把磁盘空间切成离散的、定长的 block 来管理；
然后，通过 inode 能查找到所有离散的数据（保存了所有的索引）；
最后，实现索引块和数据块空间的后分配；