有关IO和性能的深度讨论-1

应用程序的读写请求必须量化,了解他们之间的比列,因为读写对存储系统的资源消耗是不通的。了解读写比率直接关系到如何应用缓存、RAID类型等子系统的最佳实践。写通常需要比读更多的资源,SSD的写操作相对读更是慢得多。

IO读写(Read/Write IO)操作

磁盘是用来给我们存取数据用的,因此当说到IO操作的时候,就会存在两种相对应的操作,存数据时候对应的是写IO操作,取数据的时候对应的是是读IO操作。 当控制磁盘的控制器接到操作系统的读IO操作指令的时候,控制器就会给磁盘发出一个读数据的指令,并同时将要读取的数据块的地址传递给磁盘,然后磁盘会将读取到的数据传给控制器,并由控制器返回给操作系统,完成一个写IO的操作;同样的,一个写IO的操作也类似,控制器接到写的IO操作的指令和要写入的数据,并将其传递给磁盘,磁盘在数据写入完成之后将操作结果传递回控制器,再由控制器返回给操作系统,完成一个写IO的操作。单个IO操作指的就是完成一个写IO或者是读IO的操作。

顺序IO和随机IO

传统存储系统通常都是机械硬盘,因此整个系统设计为尽可能顺序化I/O,减少由于磁盘寻道所带来的延迟。所以,顺序I/O相对随机I/O的性能会好很多。随机小I/O消耗比顺序大I/O更多的处理资源。随机小I/O更在意系统处理I/O的数量,即IOPS;而顺序大I/O则更在意带宽,即MB/s。因此,如果系统承载了多种不同的应用,必须了解它们各自的需求,是对IOPS有要求,还是对带宽有要求。这往往需要在两种之间进行折衷考虑。闪盘是一个例外,它没有机械寻道操作,因此对随机小I/O的处理是非常迅速的,由此是读操作。

如何区分顺序IO和随机IO

IO的寻址方式是IO特性的一个重要方面,分为顺序、随机或混合,这取决于上层应用程序获取数据的方式。例如,数据库OLTP业务是典型的随机读写,视频监控业务是典型的顺序读,SPC-1模型是混合读写。

在通常情况下,如果数据的读写是在连续的磁盘空间上,可以认为是顺序IO;如果应用读取的数据分布在不连续的磁盘空间,且无固定的顺序,则视为随机IO;如果一部分数据是顺序读写,一部分数据是随机读写,则视为混合类型IO

随机(Random)访问与连续(Sequential)访问

随机访问指的是本次IO所给出的扇区地址和上次IO给出扇区地址相差比较大,这样的话磁头在两次IO操作之间需要作比较大的移动动作才能重新开始读/写数据。相反的,如果当次IO给出的扇区地址与上次IO结束的扇区地址一致或者是接近的话,那磁头就能很快的开始这次IO操作,这样的多个IO操作称为连续访问。因此尽管相邻的两次IO操作在同一时刻发出,但如果它们的请求的扇区地址相差很大的话也只能称为随机访问,而非连续访问。

顺序IO(Queue Mode)/并发IO(Burst Mode)

磁盘控制器可能会一次对磁盘组发出一连串的IO命令,如果磁盘组一次只能执行一个IO命令时称为顺序IO;当磁盘组能同时执行多个IO命令时,称为并发IO。并发IO只能发生在由多个磁盘组成的磁盘组上,单块磁盘只能一次处理一个IO命令。

顺序/随机特性对性能的影响

在磁盘层面,顺序IO的性能优于随机IO。这是由于传统的机械磁盘读写数据需要盘片转动和磁头移动,使得随机读写的盘片旋转和磁头寻道时间要远大于顺序读写。

在智能存储系统层面,通常情况下,顺序IO的性能同样大大优于随机IO,特别是对于小IO的IOPS性能而言:

1、小IO读:通过顺序流识别和预取算法,系统提前在磁盘上读取大块的连续数据存放在cache中,后续的大量顺序小IO在cache中命中,无需下盘处理。而随机小IO在cache中命中率极低,只能逐个下盘读。

2、小IO写:通过IO合并,系统将多个顺序小IO合并成一个较大的IO下盘。如果在RAID5或RAID6场景,IO聚合成满分条大小的情况下,无需做预读操作,不会触发RAID写惩罚,效率很高。而随机小IO无法合并,只能逐个下盘写,且会触发写惩罚,导致性能更为低下。典型业务场景的顺序/随机特性,以下是一些典型业务场景的顺序/随机特性。

CSDN有关IO和性能深度理解-2-CSDN博客

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

早日实现财富自由-2025

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值