dd命令的基本使用
dd:用指定大小的块拷贝一个文件,并在拷贝的同时进行指定的转换。
注意:指定数字的地方若以下列字符结尾,则乘以相应的数字:b=512;c=1;k=1024;w=2
参数注释:
if=文件名:输入文件名,缺省为标准输入。即指定源文件。< if=input file >
of=文件名:输出文件名,缺省为标准输出。即指定目的文件。< of=output file >
ibs=bytes:一次读入bytes个字节,即指定一个块大小为bytes个字节。
obs=bytes:一次输出bytes个字节,即指定一个块大小为bytes个字节。
bs=bytes:同时设置读入/输出的块大小为bytes个字节。
cbs=bytes:一次转换bytes个字节,即指定转换缓冲区大小。
skip=blocks:从输入文件开头跳过blocks个块后再开始复制。
seek=blocks:从输出文件开头跳过blocks个块后再开始复制。
注意:通常只用当输出文件是磁盘或磁带时才有效,即备份到磁盘或磁带时才有效。
count=blocks:仅拷贝blocks个块,块大小等于ibs指定的字节数。
conv=conversion:用指定的参数转换文件。
ascii:转换ebcdic为ascii
ebcdic:转换ascii为ebcdic
ibm:转换ascii为alternate ebcdic
block:把每一行转换为长度为cbs,不足部分用空格填充
unblock:使每一行的长度都为cbs,不足部分用空格填充
lcase:把大写字符转换为小写字符
ucase:把小写字符转换为大写字符
swab:交换输入的每对字节
noerror:出错时不停止
notrunc:不截短输出文件
sync:将每个输入块填充到ibs个字节,不足部分用空(nul)字符补齐。
使用 dd 命令进行硬盘 i/o 性能检测
如何使用dd命令测试我的硬盘性能?如何在linux操作系统下检测硬盘的读写速度?
你可以使用以下命令在一个linux或类unix操作系统上进行简单的i/o性能测试。
dd命令 :它被用来在linux和类unix系统下对硬盘设备进行写性能的检测。
hparm命令:它用来在基于 linux 的系统上获取或设置硬盘参数,包括测试读性能以及缓存性能等。
在这篇指南中,你将会学到如何使用dd命令来测试硬盘性能。
使用dd命令来监控硬盘的读写性能:
打开shell终端。
或者通过ssh登录到远程服务器。
使用dd命令来测量服务器的吞吐率(写速度) dd if=/dev/zero of=/tmp/test1.img bs=1g count=1 oflag=dsync
使用dd命令测量服务器延迟 dd if=/dev/zero of=/tmp/test2.img bs=512 count=1000 oflag=dsync
理解dd命令的选项
在这个例子当中,我将使用搭载ubuntu linux 14.04 lts系统的raid-10(配有sas ssd的adaptec 5405z)服务器阵列来运行。基本语法为:
复制代码代码如下:
dd if=/dev/input.file of=/path/to/output.file bs=block-size count=number-of-blocks oflag=dsync
## gnu dd语法 ##
dd if=/dev/zero of=/tmp/test1.img bs=1g count=1 oflag=dsync
##另外一种gnu dd的语法 ##
dd if=/dev/zero of=/tmp/testalt.img bs=1g count=1 conv=fdatasync
输出样例:
请各位注意在这个实验中,我们写入一个g的数据,可以发现,服务器的吞吐率是135 mb/s,这其中
if=/dev/zero (if=/dev/input.file) :用来设置dd命令读取的输入文件名。
of=/tmp/test1.img (of=/path/to/output.file):dd命令将input.file写入的输出文件的名字。
bs=1g (bs=block-size) :设置dd命令读取的块的大小。例子中为1个g。
count=1 (count=number-of-blocks):dd命令读取的块的个数。
oflag=dsync (oflag=dsync) :使用同步i/o。不要省略这个选项。这个选项能够帮助你去除caching的影响,以便呈现给你精准的结果。
conv=fdatasyn: 这个选项和oflag=dsync含义一样。
在下面这个例子中,一共写了1000次,每次写入512字节来获得raid10服务器的延迟时间:
复制代码代码如下:
dd if=/dev/zero of=/tmp/test2.img bs=512 count=1000 oflag=dsync
输出样例:
1000+0 records in
1000+0 records out
512000 bytes (512 kb) copied, 0.60362 s, 848 kb/s
请注意服务器的吞吐率以及延迟时间也取决于服务器/应用的负载。所以我推荐你在一个刚刚重启过并且处于峰值时间的服务器上来运行测试,以便得到更加准确的度量。现在你可以在你的所有设备上互相比较这些测试结果了。
为什么服务器的吞吐率和延迟时间都这么差?
低的数值并不意味着你在使用差劲的硬件。可能是硬件 raid10的控制器缓存导致的。
使用hdparm命令来查看硬盘缓存的读速度。
我建议你运行下面的命令2-3次来对设备读性能进行检测,以作为参照和相互比较:
复制代码代码如下:
### 有缓存的硬盘读性能测试——/dev/sda ###
hdparm -t /dev/sda1
## 或者 ##
hdparm -t /dev/sda
然后运行下面这个命令2-3次来对缓存的读性能进行对照性检测:
复制代码代码如下:
## cache读基准——/dev/sda ###
hdparm -t /dev/sda1
## 或者 ##
hdparm -t /dev/sda
或者干脆把两个测试结合起来:
复制代码代码如下:
hdparm -tt /dev/sda
输出样例:
请再次注意,由于文件文件操作的缓存属性,你将总是会看到很高的读速度。
使用dd命令来测试读取速度
为了获得精确的读测试数据,首先在测试前运行下列命令,来将缓存设置为无效:
复制代码代码如下:
flush
echo 3 | sudo tee /proc/sys/vm/drop_caches
time time dd if=/path/to/bigfile of=/dev/null bs=8k
笔记本上的示例
运行下列命令:
复制代码代码如下:
### 带有cache的debian系统笔记本吞吐率###
dd if=/dev/zero of=/tmp/laptop.bin bs=1g count=1 oflag=direct
###使cache失效###
hdparm -w0 /dev/sda
###没有cache的debian系统笔记本吞吐率###
dd if=/dev/zero of=/tmp/laptop.bin bs=1g count=1 oflag=direct
苹果os x unix(macbook pro)的例子
gnu dd has many more options but os x/bsd and unix-like dd command need to run as follows to test real disk i/o and not memory add sync option as follows:
gnu dd命令有其他许多选项,但是在 os x/bsd 以及类unix中, dd命令需要像下面那样执行来检测去除掉内存地址同步的硬盘真实i/o性能:
复制代码代码如下:
## 运行这个命令2-3次来获得更好地结果 ###
time sh -c "dd if=/dev/zero of=/tmp/testfile bs=100k count=1k && sync"
输出样例:
1024+0 records in
1024+0 records out
104857600 bytes transferred in 0.165040 secs (635346520 bytes/sec)
real 0m0.241s
user 0m0.004s
sys 0m0.113s
本人macbook pro的写速度是635346520字节(635.347mb/s)。
不喜欢用命令行?
你可以在linux或基于unix的系统上使用disk utility(gnome-disk-utility)这款工具来得到同样的信息。下面的那个图就是在我的fedora linux v22 vm上截取的。
图形化方法
点击“activites”或者“super”按键来在桌面和activites视图间切换。输入“disks”
在左边的面板上选择你的硬盘,点击configure按钮,然后点击“benchmark partition”:
最后,点击“start benchmark...”按钮(你可能需要输入管理员用户名和密码):
如果你要问,我推荐使用哪种命令和方法?
我推荐在所有的类unix系统上使用dd命令(time sh -c "dd if=/dev/zero of=/tmp/testfile bs=100k count=1k && sync)
如果你在使用gnu/linux,使用dd命令 (dd if=/dev/zero of=/tmp/testalt.img bs=1g count=1 conv=fdatasync)
确保你每次使用时,都调整了count以及bs参数以获得更好的结果。
gui方法只适合桌面系统为gnome2或gnome3的linux/unix笔记本用户。