mysql raw_mysql innodb 配置 raw,实现linux下绕过内核缓冲区,实现直接I/O

(转自linux社区)

MySQL 的 InnoDB 存储引擎不仅可以缓存索引，而且还可以缓存数据，如果将其表和索引存储在裸设备(Raw Device)上，从而绕过了文件系统的高速缓存和缓冲器而直接访问磁盘，那么将大大降低Linux文件系统的负担，使系统性能获得显著改善。

另外，从裸设备在数据库应用的优化原理中，我们也可以看到优化数据库的一个基本方向，就是如何设法降低因数据库特有的 I/O 密集型访问所导致的文件系统的繁重负担。因此,即使在现有的基于文件系统的数据库存储引擎上，也可考虑使用特殊的文件系统挂载方式。

例如为存储数据库文件的分区使用 noatime 作为挂载参数，由于访问次数(access times)不再被记录 可以带来系统性能的一定程度的提升。

──────────────────────────────────────────────────────────────────────────────

本笔记最新配置之系统环境：

──────────────────────────────────────────────────────────────────────────────

OS:  CentOS6

HDD:  /dev/sdc /dev/sdd

RAW:  /dev/raw/raw1 /dev/raw/raw2

MySQL:  5.1.61

USER:  mysql:mysql

──────────────────────────────────────────────────────────────────────────────

(1) 设置裸设备(Prepare the raw device)

──────────────────────────────────────────────────────────────────────────────

在使用裸设备之前，必须先将磁盘设备绑定到裸设备上：

# /bin/raw /dev/raw/raw1 /dev/sdc;

--------------------------------------------------------------------------------

/dev/raw/raw1:  bound to major 8, minor 32

--------------------------------------------------------------------------------

再绑定另一个裸设备，然后还要让您的MySQL数据库的运行用户有权读写裸设备：

# /bin/raw /dev/raw/raw2 /dev/sdd;

# chown root:mysql /dev/raw/raw1 /dev/raw/raw2;

# chmod 0660 /dev/raw/raw1 /dev/raw/raw2;

# /bin/raw -qa;

# /bin/raw -q /dev/raw/raw1;

# /bin/ls -l /dev/raw/raw1;

# blockdev --report /dev/raw/raw1;

# blockdev --report /dev/sdc;

vi /etc/udev/rules.d/60-raw.rules;

--------------------------------------------------------------------------------

ACTION=="add", KERNEL=="sdc", GROUP=="mysql", MODE=="0660", RUN+="/bin/raw /dev/raw/raw1 %N"

ACTION=="add", KERNEL=="sdd", GROUP=="mysql", MODE=="0660", RUN+="/bin/raw /dev/raw/raw2 %N"

--------------------------------------------------------------------------------

Note: this make sure device /dev/sdc and /dev/sdd will bind automatically when server reboot.

# vi /etc/udev/rules.d/41-local-permissions-rules;

──────────────────────────────────────────────────────────────────────────────

(2) 如有需要，先备份旧有的InnoDB数据表

──────────────────────────────────────────────────────────────────────────────

如果您的数据库已经运行，并且现有数据存储于旧的InnoDB引擎之中，如果您需要迁移的话，

请在关闭数据库之前预先用mysqldump命令导出您的数据， 等新引擎配置好之后再导入即可。

可参考如下SQL命令查看和导出您的InnoDB数据表：

mysql> SELECT table_schema,table_name,engine FROM INFORMATION_SCHEMA.TABLES;

mysql> SELECT table_schema, table_name FROM INFORMATION_SCHEMA.TABLES WHERE engine='InnoDB';

如有需要，可用mysqldump导出数据，请参考如下格式(请用相应的数据库和表名称)：

mysqldump -u root -p -h localhost [database].[table] > database.table.sql

注意：您必须逐个表导出旧的数据。

──────────────────────────────────────────────────────────────────────────────

(3) 初始化阶段MySQL的配置

──────────────────────────────────────────────────────────────────────────────

When you create a new data file, put the keyword newraw

immediately after the data file size in innodb_data_file_path:

# vi /etc/my.cnf;

--------------------------------------------------------------------------------

[mysqld]

innodb_buffer_pool_size=128M

innodb_data_home_dir=

innodb_data_file_path=/dev/raw/raw1:64Mnewraw;/dev/raw/raw2:64Mnewraw

--------------------------------------------------------------------------------

后记:

mysql 还提供了另一种实现方式,配置 my.ini 里 innodb_flush_method

innodb_flush_method = O_DIRECT

这样也可以实现直接I/O