数据库服务基础

数据库服务器中磁盘RAID

  • 目标:
    • 提高数据可靠性
    • 提高I/O性能
  • 关键技术
    • 镜像:将数据复制到多个磁盘,一方面可以提高可靠性,另一方面并发从两个或多个副本读取数据来提高读性能;
    • 数据条带:将数据分片保存在多个不同的磁盘,多个数据分片共同组成一个完整数据副本,这与镜像的多个副本是不同的,它通常用于性能考虑。数据条带具有更高的并发粒度,当访问数据时,可以同时对位于不同磁盘上数据进行读写操作,从而获得非常可观的I/O性能提升;
    • 数据校验:利用冗余数据进行数据错误检测和修复,冗余数据通常采用海明码、异或操作等算法来计算获得。利用校验功能。可以很大程度上提高磁盘阵列的可靠性、容错能力。

常见RAID类型

RAID 0 (条带化)
  • 优点:高性能(读写速度快)
  • 缺点:无数据冗余,一块磁盘损坏将导致所有数据丢失
  • 适用场景:需要高性能但不需要数据冗余的场景,如缓存盘、临时数据存储
RAID 1 (镜像)
  • 优点:高数据冗余,每块磁盘有一个完整的备份
  • 缺点:存储效率低(仅50%),成本较高
  • 适用场景:需要高数据可靠性的场景,如操作系统盘、关键数据存储
RAID 5 (条带化和分布式奇偶校验)
  • 优点:良好的读性能和数据冗余,存储效率较高(N-1/N)
  • 缺点:写性能较差,重建时间较长
  • 适用场景:需要良好读性能和数据冗余的场景,如中小型数据库服务器
RAID 6 (条带化和双分布式奇偶校验)
  • 优点:高数据冗余(允许两块磁盘同时故障),存储效率较高(N-2/N)
  • 缺点:写性能较差,重建时间较长
  • 适用场景:需要极高数据可靠性和较好读性能的场景,如大型数据库服务器
RAID 10 (RAID 1+0,条带化和镜像)
  • 优点:结合了RAID 0的高性能和RAID 1的高数据冗余
  • 缺点:存储效率较低(50%),成本较高
  • 适用场景:需要高性能和高数据可靠性的场景,如高性能数据库服务器

在数据库服务器中使用RAID可以显著提高数据的可用性、可靠性和性能。选择合适的RAID级别取决于你的具体需求,如性能、数据冗余和成本。常见的配置包括操作系统盘使用RAID 1,数据库数据盘使用RAID 10,备份盘使用RAID 5或RAID 6。确保根据你的RAID控制器和服务器品牌,按照适当的步骤配置RAID阵列。

数据库优化磁盘I/O调度器

优化数据库服务器的磁盘I/O性能对于提高数据库的响应时间和整体性能至关重要。Linux内核提供了多种I/O调度器,每种调度器都有不同的特性和适用场景。以下是一些常见的I/O调度器以及如何选择和优化它们以适应数据库负载:

常见的I/O调度器

  1. noop

    • 特点:简单的FIFO队列,不进行任何排序或合并请求。
    • 适用场景:适用于SSD等无寻道时间的设备。
  2. deadline

    • 特点:维护两个队列(读队列和写队列),根据时间戳处理请求,确保较短的I/O延迟。
    • 适用场景:适用于需要低延迟和一致性能的数据库负载。
  3. cfq (Completely Fair Queuing)

    • 特点:为每个进程分配一个I/O队列,尝试公平地分配I/O带宽。
    • 适用场景:适用于多用户环境,但可能不是高性能数据库的最佳选择。
  4. bfq (Budget Fair Queuing)

    • 特点:类似于cfq,但对带宽和响应时间控制更细致。
    • 适用场景:适用于桌面系统和某些服务器工作负载。
  5. mq-deadline

    • 特点:多队列版本的deadline,适用于现代多核处理器和高速存储设备。
    • 适用场景:适用于需要低延迟的高性能存储系统。

选择合适的I/O调度器

对于数据库服务器,通常推荐使用 deadlinemq-deadline 调度器,因为它们可以提供较低的I/O延迟和一致的性能。

1、cfq是一种比较通用的调度算法,是一种以进程为出发点考虑的调度算法,保证大家尽量公平。

2、deadline是一种以提高机械硬盘吞吐量为思考出发点的调度算法,只有当有io请求达到最终期限的时候才进行调度,非常适合业务比较单一并且IO压力比较重的业务,比如数据库。

3、noop,固态硬盘,无论cfq还是deadline,都是针对机械硬盘的结构进行的队列算法调整,而这种调整对于固态硬盘来说,完全没有意义。对于固态硬盘来说,IO调度算法越复杂,效率就越低,因为额外要处理的逻辑越多。所以,固态硬盘这种场景下,使用noop是最好的,deadline次之,而cfq由于复杂度的原因,无疑效率最低。

达梦社区地址:https://eco.dameng.com

  • 20
    点赞
  • 16
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值