fio 命令入门到跑路(千万不能在系统所在的分区测试硬盘性能)

fio是一种I / O工具,用于基准测试和压力/硬件验证。它支持19种不同类型的I / O引擎(sync,mmap,libaio,posixaio,SG v3,splice,null,network,syslet,guasi,solarisaio等),I / O优先级(适用于较新的Linux内核) ,评估I / O,分叉或线程作业等等。它可以在块设备和文件上工作。fio以简单易懂的文本格式接受职位描述。包含几个示例作业文件。fio显示各种I / O性能信息,包括完整的IO延迟和百分位数。Fio在许多地方广泛使用,用于基准测试,QA和验证目的。它支持Linux,FreeBSD,NetBSD,OpenBSD,OS X,OpenSolaris,AIX,HP-UX,Android和Windows。
fio 官网地址:http://freshmeat.net/projects/fio/

安装:  

        yum install fio –y

image

用法

      fio分顺序读  -rw=read ,随机读 -rw=randread,顺序写 -rw=write,随机写-rw=randwrite ,混合随机读写模式  -rw=randrw

参数:

       filename: 指定文件(设备)的名称。可以通过冒号分割同时指定多个文件,如filename=/dev/sda:/dev/sdb。

       directory: 设置filename的路径前缀。在后面的基准测试中,采用这种方式来指定设备。

       name: 指定job的名字,在命令行中表示新启动一个job。

       direct: bool类型,如果设置成true (1),表示不使用io buffer。

        ioengine: I/O引擎,现在fio支持19种ioengine。默认值是sync同步阻塞I/O,libaio是Linux的native异步I/O。

       iodepth: 如果ioengine采用异步方式,该参数表示一批提交保持的io单元数。该参数可参考文章“Fio压测工具和io队列深度理解和误区”。

       rw: I/O模式,随机读写,顺序读写等等。

       bs: I/O block大小,默认是4k。

       size: 指定job处理的文件的大小。

       numjobs: 指定job的克隆数(线程)。

       time_based: 如果在runtime指定的时间还没到时文件就被读写完成,将继续重复知道runtime时间结束。

       runtime: 指定在多少秒后停止进程。如果未指定该参数,fio将执行至指定的文件读写完全完成。

       group_reporting: 当同时指定了numjobs了时,输出结果按组显示。

下面是带数字的解释:

   direct=1             #测试过程绕过机器自带的buffer。使测试结果更真实
   rw=randwrite         #测试随机写的I/O
   rw=randrw            #测试随机写和读的I/O
   bs=16k               #单次io的块文件大小为16k
   bsrange=512-2048     #同上,提定数据块的大小范围
   size=5G              #本次的测试文件大小为5g,以每次4k的io进行测试
   numjobs=30           #本次的测试线程为30个
   runtime=1000         #测试时间1000秒,如果不写则一直将5g文件分4k每次写完为止
   ioengine=psync       #io引擎使用psync方式
   rwmixwrite=30        #在混合读写的模式下,写占30%
   group_reporting      #关于显示结果的,汇总每个进程的信息
   lockmem=1G           #只使用1g内存进行测试
   zero_buffers         #用0初始化系统buffer
   nrfiles=8            #每个进程生成文件的数量

       filename参数指定某个要测试的裸设备(硬盘或分区),切勿在系统分区做测试,会破坏系统分区,而导致系统崩溃。若一定要测试系统分区较为安全的方法是:在根目录下创建一个空目录,在测试命令中使用directory参数指定该目录,而不使用filename参数。

例如:要测试根目录

               mkdir /test/
               fio -directory=/test/ ……

我建了一个/data

fio -directory=/data/ -name=tempfile.dat -direct=1 -rw=randwrite -bs=4k -size=1M -numjobs=16 -time_based -runtime=100 -group_reporting

image

 

看看生成的一堆文件

QQ截图20181120103917.png

#复制下面的配置内容,将directory=/path/to/test修改为你测试硬盘挂载目录的地址,并另存为fio.conf

[global]
ioengine=libaio
direct=1
thread=1
norandommap=1
randrepeat=0
runtime=60
ramp_time=6
size=1g
directory=/data
[read4k-rand]
stonewall
group_reporting
bs=4k
rw=randread
numjobs=8
iodepth=32
[read64k-seq]
stonewall
group_reporting
bs=64k
rw=read
numjobs=4
iodepth=8
[write4k-rand]
stonewall
group_reporting
bs=4k
rw=randwrite
numjobs=2
iodepth=4
[write64k-seq]
stonewall
group_reporting
bs=64k
rw=write
numjobs=2
iodepth=4

 

#测试

fio fio.conf

 

--------------------- 

怎么跑路的:

    我之前用的dd命令测试的硬盘性能

•使用dd命令来测量服务器的吞吐率(写速度) dd if=/dev/zero of=/tmp/test1.img bs=1G count=1 oflag=dsync

•使用dd命令测量服务器延迟 dd if=/dev/zero of=/tmp/test2.img bs=512 count=1000 oflag=dsync

•if=/dev/zero (if=/dev/input.file) :用来设置dd命令读取的输入文件名。 

•of=/tmp/test1.img (of=/path/to/output.file):dd命令将input.file写入的输出文件的名字。 

•bs=1G (bs=block-size) :设置dd命令读取的块的大小。例子中为1个G。 

•count=1 (count=number-of-blocks):dd命令读取的块的个数。 

•oflag=dsync (oflag=dsync) :使用同步I/O。不要省略这个选项。这个选项能够帮助你去除caching的影响,以便呈现给你精准的结果。 

•conv=fdatasyn: 这个选项和oflag=dsync含义一样。

QQ截图20181120104029.png

 

 

QQ群里一个小伙说用fio测试才准确,差 你个糟老头子,我信了你个鬼。

QQ截图20181120104127.png

我就执行了下面的命令 ,sda1是系统所在的盘。

fio -name iops -rw=write -bs=4k -runtime=60 -iodepth 32 -filename /dev/sda1 -ioengine libaio -direct=1

还没执行完系统就断了,联系机房看了下报错,文件系统崩溃了,哎 哎 哎 不让说哎 就说哎

 

webwxgetmsgimg (2).jpg

 

我能怎么办只能下面这个样子了:

timg.jpg

dd命令测试的是对的

dd if=/dev/zero of=/tmp/test.dbf bs=4k count=10000  oflag=dsync

QQ截图20181122081935.png

另外一个就快

QQ截图20181122082134.png

为什么差距这么大呢?后来发现是因为一个是sas卡 一个是raid卡 raid卡有缓存比sas卡快

QQ截图20181121154444.png

QQ截图20181121154534.png

 

到最后终于找到原因了,奉劝你不要用这个fio命令,赶紧忘记他,去你的fio命令

<think>好的,用户让我介绍一下fio命令的详解。首先,我需要回忆一下自己对fio的了解,确保信息的准确性。fio是一个强大的磁盘性能测试工具,常用于评估存储设备的IO性能,比如硬盘、SSD等。用户可能是系统管理员或者开发人员,需要优化系统存储性能或者进行基准测试。 接下来,我需要考虑用户的需求层次。他们可能不仅需要基本的命令用法,还希望了解参数选项、使用示例以及注意事项。同时,用户可能对如何解读测试结果感兴趣,或者如何根据不同的场景选择合适的测试模式。 然后,我需要组织回答的结构。先介绍fio是什么,它的主要用途,然后讲解基本语法,参数分类(比如作业文件参数、全局参数、IO引擎、测试模式等),再给出一些典型示例,比如顺序读写、随机读写、混合读写测试。最后,可能需要提醒用户注意事项,比如谨慎使用破坏性测试,避免在生产环境中随意运行,以及如何分析结果。 需要确保使用中文,并且按照用户的要求,行内数学表达式用$...$,独立公式用$$...$$,但在这个问题中可能用不到数学公式,不过要注意其他格式要求,比如代码块用反引号。同时,回答要结构清晰,分步骤讲解,确保用户能逐步理解和应用fio命令。 还需要检查是否有常见的错误,比如参数拼写错误,示例命令是否正确,以及是否覆盖了用户可能关心的各个方面。例如,用户可能想知道如何模拟不同的IO负载,或者如何调整块大小、队列深度等参数来逼近真实场景。 最后,总结一下,确保回答全面且易于理解,帮助用户有效使用fio进行性能测试,同时提醒他们注意数据安全和测试环境的选择。</think>以下为`fio`命令的详解,按使用场景和功能分类说明: --- ### **一、fio简介** `fio`(Flexible I/O Tester)是一款强大的存储性能测试工具,支持模拟多种I/O模式(顺序/随机、读/写/混合),适用于评估磁盘、SSD、网络存储等设备的性能指标(如IOPS、吞吐量、延迟)。 --- ### **二、基本语法** ```bash fio [options] [jobfile] ``` - 若未指定`jobfile`,需通过命令行参数配置测试任务 - 常用方式:将测试参数写入`.fio`文件,通过`fio job.fio`执行 --- ### **三、核心参数解析** #### **1. 作业文件(Job File)参数** - **`ioengine`**:I/O引擎类型 ```ini ioengine=libaio # 异步I/O(常用) ioengine=sync # 同步I/O ``` - **`direct`**:是否绕过缓存 ```ini direct=1 # 绕过系统缓存(真实测试存储设备性能) ``` - **`rw`**:I/O模式 ```ini rw=read # 顺序读 rw=randread # 随机读 rw=write # 顺序写 rw=randwrite # 随机写 rw=rw, rwmixread=70 # 混合读写(70%读+30%写) ``` - **`bs`**:块大小 ```ini bs=4k # 单次I/O块大小为4KB(模拟数据库负载) bs=1m # 块大小为1MB(测试大文件传输) ``` - **`size`**:总测试数据量 ```ini size=1G # 测试数据总量为1GB ``` - **`numjobs`**:并发线程/进程数 ```ini numjobs=16 # 启动16个并发任务 ``` - **`runtime`**:测试时长 ```ini runtime=60 # 测试持续60秒 ``` #### **2. 全局参数(命令行直接指定)** - **`--name`**:任务名称 ```bash fio --name=test_read ... ``` - **`--output`**:结果输出文件 ```bash fio --output=result.txt ... ``` - **`--bandwidth-log`**:生成带宽日志 ```bash fio --bandwidth-log=bw.log ... ``` --- ### **四、典型测试示例** #### **1. 顺序读测试(4KB块,16线程,60秒)** ```bash fio --name=seq_read --ioengine=libaio --direct=1 --rw=read --bs=4k --size=1G --numjobs=16 --runtime=60 --group_reporting ``` #### **2. 随机写测试(4KB块,单线程,绕过缓存)** ```bash fio --name=rand_write --ioengine=libaio --direct=1 --rw=randwrite --bs=4k --size=500M --runtime=30 ``` #### **3. 混合读写测试(70%读+30%写,1MB块)** ```bash fio --name=mixed_rw --rw=rw --rwmixread=70 --bs=1m --size=2G --numjobs=8 --runtime=120 --group_reporting ``` --- ### **五、结果解读关键指标** - **IOPS**:每秒I/O操作次数(值越高越好) - **BW(Bandwidth)**:吞吐量(如`BW=120MiB/s`) - **lat(Latency)**:延迟(包括`clat`=提交延迟,`slat`=调度延迟) - **CPU利用率**:高负载下需关注是否成为瓶颈 --- ### **六、注意事项** 1. **数据安全**:写测试会覆盖目标文件,避免在存有数据的磁盘上直接测试 2. **缓存影响**:测试真实设备性能时务必设置`direct=1` 3. **多维度测试**:组合不同`bs`和`rw`模式模拟实际负载 4. **日志分析**:使用`--bandwidth-log`生成日志可绘制吞吐量变化曲线 --- ### **七、进阶技巧** - **使用配置文件**:将参数写入`.fio`文件便于复用 ```ini # read_test.fio [global] ioengine=libaio direct=1 runtime=60 [seq-read] rw=read bs=1m size=10G ``` - **多设备测试**:通过`filename`指定多个设备 ```ini filename=/dev/sda:/dev/sdb ``` 如果需要更具体的场景配置或结果分析示例,可提供测试目标进一步探讨。
评论 7
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值