多个nvme进行fio读写时按时reset的测试写法

今天看到了一个有意思的测试case，如下：

对所有的nvme待测盘进行4K随机读写24小时，分别隔8,4,2个小时，对盘进行3次reset，观察盘的读写是否会停止。

话不多说，我们直接开始写这个测试脚本。
1.首先我们遍历出所有的待测nvme盘符，方法有很多种(参考我之前的文章)

nvme list|awk '{print $1}'|sed 1,2d|awk -F "/" '{print $NF}'
nvme3n1
nvme2n1
nvme0n1
nvme1n1
nvme6n1
nvme4n1
nvme5n1
nvme7n1

2 .然后我们把fio的写法放入for循环里

#!/bin/bash
for nvme in $(nvme list|awk '{print $1}'|sed 1,2d)|awk -F "/" '{print $NF}'
do
        nohup fio --name=1 --filename=/dev/$nvme --ioengine=libaio --direct=1 --thread=1 --numjobs=1 --iodepth=128 --rw=randrw --bs=4k --runtime=24h --time_based=1 --size=100% --norandommap=1 --randrepeat=0 --group_reporting --log_avg_msec=1000 --bwavgtime=1000 --minimal >> ${nvme}_random_write_data.log &
done

3.接下来我们要理解第二个条件的意思，其实就是说在盘读写进行到第8个小时时，做一次reset, 之后隔4个小时做一次reset,再隔2个小时做最后一次reset.
8h sleep 28200
4h sleep 14400
2h sleep 7200
4 接下来是reset nvme盘的写法
a. 获取nvme盘的bus ID

readlink -f /sys/block/nvme0n1
/sys/devices/pci0000:64/0000:64:02.0/0000:65:00.0/nvme/nvme0/nvme0n1

b.将ID截取出来(方法有很多种，截取字符串可以参考我之前的文章),这里简单介绍两种

readlink -f /sys/block/nvme0n1 |awk -F "/" '{print $6}'
0000:65:00.0

readlink -f /sys/block/nvme0n1 |cut -d  "/" -f 6
0000:65:00.0

c .reset 指令：echo 1 >/sys/bus/pci/devices/$(bus)

echo 1 >/sys/bus/pci/devices/$(readlink -f /sys/block/nvme0n1|cut -d '/' -f 6)/reset

5 .开始写reset的函数
a.首先我们要写一个sleep三次的循环

for num in 28800 7200 7200
do
        sleep $num      
done

b.将指令嵌套进去

for num in 28800 7200 7200
do
        sleep $num
        for i in $(nvme list|awk '{print $1}'|sed 1,2d|awk -F '/' '{print $NF}' )
        do
                echo 1 >/sys/bus/pci/devices/$(readlink -f /sys/block/${i}|cut -d '/' -f 6)/reset

                sleep 5
        done
done

6.最后一步我们要保证这两个函数的进程是同时进行的.

#!/bin/bash
function nvme_fio(){
for nvme in $(nvme list|awk '{print $1}'|sed 1,2d|awk -F '/' '{print $NF}')
do
        nohup fio --name=1 --filename=/dev/$nvme --ioengine=libaio --direct=1 --thread=1 --numjobs=1 --iodepth=128 --rw=randrw --bs=4k --runtime=24h --time_based=1 --size=100% --norandommap=1 --randrepeat=0 --group_reporting --log_avg_msec=1000 --bwavgtime=1000 --minimal >> ${nvme}_random_write_data.log &
done
}
function nvme_reset(){
for num in 28800 7200 7200
do
        sleep $num
        for i in $(nvme list|awk '{print $1}'|sed 1,2d|awk -F '/' '{print $NF}' )
        do
                echo 1 >/sys/bus/pci/devices/$(readlink -f /sys/block/${i}|cut -d '/' -f 6)/reset

                sleep 5
        done
done

}

nvme_fio &
nvme_reset &