fio命令不要在系统盘下执行

最新推荐文章于 2024-06-01 08:30:00 发布

人蠢多读书

最新推荐文章于 2024-06-01 08:30:00 发布

阅读量2.1k

点赞数

分类专栏：大数据运维之linux日常

原文链接：https://blog.51cto.com/shaonian/2319175?from=timeline

版权

大数据运维之linux日常专栏收录该内容

35 篇文章 1 订阅

订阅专栏

fio 命令入门到跑路（千万不能在系统所在的分区测试硬盘性能）

xitaotao 关注 6人评论 10009人阅读 2018-11-20 10:32:29

fio是一种I / O工具，用于基准测试和压力/硬件验证。它支持19种不同类型的I / O引擎（sync，mmap，libaio，posixaio，SG v3，splice，null，network，syslet，guasi，solarisaio等），I / O优先级（适用于较新的Linux内核），评估I / O，分叉或线程作业等等。它可以在块设备和文件上工作。fio以简单易懂的文本格式接受职位描述。包含几个示例作业文件。fio显示各种I / O性能信息，包括完整的IO延迟和百分位数。Fio在许多地方广泛使用，用于基准测试，QA和验证目的。它支持Linux，FreeBSD，NetBSD，OpenBSD，OS X，OpenSolaris，AIX，HP-UX，Android和Windows。
fio 官网地址：http://freshmeat.net/projects/fio/

安装：

yum install fio –y

用法

fio分顺序读 -rw=read ，随机读 -rw=randread，顺序写 -rw=write，随机写-rw=randwrite ，混合随机读写模式 -rw=randrw

参数：

filename: 指定文件(设备)的名称。可以通过冒号分割同时指定多个文件，如filename=/dev/sda:/dev/sdb。

directory: 设置filename的路径前缀。在后面的基准测试中，采用这种方式来指定设备。

name: 指定job的名字，在命令行中表示新启动一个job。

direct: bool类型，如果设置成true (1)，表示不使用io buffer。

ioengine: I/O引擎，现在fio支持19种ioengine。默认值是sync同步阻塞I/O，libaio是Linux的native异步I/O。

iodepth: 如果ioengine采用异步方式，该参数表示一批提交保持的io单元数。该参数可参考文章“Fio压测工具和io队列深度理解和误区”。

rw: I/O模式，随机读写，顺序读写等等。

bs: I/O block大小，默认是4k。

size: 指定job处理的文件的大小。

numjobs: 指定job的克隆数(线程)。

time_based: 如果在runtime指定的时间还没到时文件就被读写完成，将继续重复知道runtime时间结束。

runtime: 指定在多少秒后停止进程。如果未指定该参数，fio将执行至指定的文件读写完全完成。

group_reporting: 当同时指定了numjobs了时，输出结果按组显示。

下面是带数字的解释：

<span style="color:#333333"><span style="color:black"><code class="language-bash">   direct<span style="color:#9a6e3a">=</span>1             <span style="color:slategray">#测试过程绕过机器自带的buffer。使测试结果更真实</span>
   rw<span style="color:#9a6e3a">=</span>randwrite         <span style="color:slategray">#测试随机写的I/O</span>
   rw<span style="color:#9a6e3a">=</span>randrw            <span style="color:slategray">#测试随机写和读的I/O</span>
   bs<span style="color:#9a6e3a">=</span>16k               <span style="color:slategray">#单次io的块文件大小为16k</span>
   bsrange<span style="color:#9a6e3a">=</span>512-2048     <span style="color:slategray">#同上，提定数据块的大小范围</span>
   size<span style="color:#9a6e3a">=</span>5G              <span style="color:slategray">#本次的测试文件大小为5g，以每次4k的io进行测试</span>
   numjobs<span style="color:#9a6e3a">=</span>30           <span style="color:slategray">#本次的测试线程为30个</span>
   runtime<span style="color:#9a6e3a">=</span>1000         <span style="color:slategray">#测试时间1000秒，如果不写则一直将5g文件分4k每次写完为止</span>
   ioengine<span style="color:#9a6e3a">=</span>psync       <span style="color:slategray">#io引擎使用psync方式</span>
   rwmixwrite<span style="color:#9a6e3a">=</span>30        <span style="color:slategray">#在混合读写的模式下，写占30%</span>
   group_reporting      <span style="color:slategray">#关于显示结果的，汇总每个进程的信息</span>
   lockmem<span style="color:#9a6e3a">=</span>1G           <span style="color:slategray">#只使用1g内存进行测试</span>
   zero_buffers         <span style="color:slategray">#用0初始化系统buffer</span>
   nrfiles<span style="color:#9a6e3a">=</span>8            <span style="color:slategray">#每个进程生成文件的数量</span></code></span></span>

filename参数指定某个要测试的裸设备（硬盘或分区），切勿在系统分区做测试，会破坏系统分区，而导致系统崩溃。若一定要测试系统分区较为安全的方法是：在根目录下创建一个空目录，在测试命令中使用directory参数指定该目录，而不使用filename参数。

例如：要测试根目录

mkdir /test/
fio -directory=/test/ ……

我建了一个/data

<span style="color:#333333"><span style="color:black"><code class="language-bash">fio -directory<span style="color:#9a6e3a">=</span>/data/ -name<span style="color:#9a6e3a">=</span>tempfile.dat -direct<span style="color:#9a6e3a">=</span>1 -rw<span style="color:#9a6e3a">=</span>randwrite -bs<span style="color:#9a6e3a">=</span>4k -size<span style="color:#9a6e3a">=</span>1M -numjobs<span style="color:#9a6e3a">=</span>16 -time_based -runtime<span style="color:#9a6e3a">=</span>100 -group_reporting</code></span></span>

看看生成的一堆文件

QQ截图20181120103917.png

#复制下面的配置内容，将directory=/path/to/test修改为你测试硬盘挂载目录的地址，并另存为fio.conf

<span style="color:#333333"><span style="color:black"><code class="language-bash"><span style="color:#999999">[</span>global<span style="color:#999999">]</span>
ioengine<span style="color:#9a6e3a">=</span>libaio
direct<span style="color:#9a6e3a">=</span>1
thread<span style="color:#9a6e3a">=</span>1
norandommap<span style="color:#9a6e3a">=</span>1
randrepeat<span style="color:#9a6e3a">=</span>0
runtime<span style="color:#9a6e3a">=</span>60
ramp_time<span style="color:#9a6e3a">=</span>6
size<span style="color:#9a6e3a">=</span>1g
directory<span style="color:#9a6e3a">=</span>/data
<span style="color:#999999">[</span>read4k-rand<span style="color:#999999">]</span>
stonewall
group_reporting
bs<span style="color:#9a6e3a">=</span>4k
rw<span style="color:#9a6e3a">=</span>randread
numjobs<span style="color:#9a6e3a">=</span>8
iodepth<span style="color:#9a6e3a">=</span>32
<span style="color:#999999">[</span>read64k-seq<span style="color:#999999">]</span>
stonewall
group_reporting
bs<span style="color:#9a6e3a">=</span>64k
rw<span style="color:#9a6e3a">=</span>read
numjobs<span style="color:#9a6e3a">=</span>4
iodepth<span style="color:#9a6e3a">=</span>8
<span style="color:#999999">[</span>write4k-rand<span style="color:#999999">]</span>
stonewall
group_reporting
bs<span style="color:#9a6e3a">=</span>4k
rw<span style="color:#9a6e3a">=</span>randwrite
numjobs<span style="color:#9a6e3a">=</span>2
iodepth<span style="color:#9a6e3a">=</span>4
<span style="color:#999999">[</span>write64k-seq<span style="color:#999999">]</span>
stonewall
group_reporting
bs<span style="color:#9a6e3a">=</span>64k
rw<span style="color:#9a6e3a">=</span>write
numjobs<span style="color:#9a6e3a">=</span>2
iodepth<span style="color:#9a6e3a">=</span>4</code></span></span>

#测试

fio fio.conf

---------------------

怎么跑路的：

我之前用的dd命令测试的硬盘性能

•使用dd命令来测量服务器的吞吐率（写速度) dd if=/dev/zero of=/tmp/test1.img bs=1G count=1 oflag=dsync

•使用dd命令测量服务器延迟 dd if=/dev/zero of=/tmp/test2.img bs=512 count=1000 oflag=dsync

•if=/dev/zero (if=/dev/input.file) ：用来设置dd命令读取的输入文件名。

•of=/tmp/test1.img (of=/path/to/output.file)：dd命令将input.file写入的输出文件的名字。

•bs=1G (bs=block-size) ：设置dd命令读取的块的大小。例子中为1个G。

•count=1 (count=number-of-blocks)：dd命令读取的块的个数。

•oflag=dsync (oflag=dsync) ：使用同步I/O。不要省略这个选项。这个选项能够帮助你去除caching的影响，以便呈现给你精准的结果。

•conv=fdatasyn: 这个选项和oflag=dsync含义一样。

QQ截图20181120104029.png

QQ群里一个小伙说用fio测试才准确，差你个糟老头子，我信了你个鬼。

QQ截图20181120104127.png

我就执行了下面的命令，sda1是系统所在的盘。

<span style="color:#333333"><span style="color:black"><code class="language-bash">fio -name iops -rw<span style="color:#9a6e3a">=</span>write -bs<span style="color:#9a6e3a">=</span>4k -runtime<span style="color:#9a6e3a">=</span>60 -iodepth 32 -filename /dev/sda1 -ioengine libaio -direct<span style="color:#9a6e3a">=</span>1</code></span></span>

还没执行完系统就断了，联系机房看了下报错，文件系统崩溃了，哎哎哎不让说哎就说哎

webwxgetmsgimg (2).jpg

我能怎么办只能下面这个样子了：

dd命令测试的是对的

<span style="color:#333333"><span style="color:black"><code class="language-bash"><span style="color:#dd4a68">dd</span> if<span style="color:#9a6e3a">=</span>/dev/zero of<span style="color:#9a6e3a">=</span>/tmp/test.dbf bs<span style="color:#9a6e3a">=</span>4k count<span style="color:#9a6e3a">=</span>10000  oflag<span style="color:#9a6e3a">=</span>dsync</code></span></span>

QQ截图20181122081935.png

另外一个就快

QQ截图20181122082134.png

为什么差距这么大呢？后来发现是因为一个是sas卡一个是raid卡 raid卡有缓存比sas卡快

QQ截图20181121154444.png

QQ截图20181121154534.png

到最后终于找到原因了，奉劝你不要用这个fio命令，赶紧忘记他，去你的fio命令

人蠢多读书

关注

0
点赞
踩
7

收藏

觉得还不错? 一键收藏
0
评论
fio命令不要在系统盘下执行

fio 命令入门到跑路（千万不能在系统所在的分区测试硬盘性能）xitaotao关注6人评论10009人阅读2018-11-20 10:32:29fio是一种I / O工具，用于基准测试和压力/硬件验证。它支持19种不同类型的I / O引擎（sync，mmap，libaio，posixaio，SG v3，splice，null，network，syslet，guasi，...
复制链接

扫一扫

专栏目录