裸设备相关知识

Normal 0 7.8 磅 0 2 false false false EN-US ZH-CN X-NONE 什么叫做裸设备

  

1．什么叫做裸设备？

裸设备，也叫裸分区（原始分区），是一种没有经过格式化，不被Unix通过文件系统来读取的特殊字符设备。它由应用程序负责对它进行读写操作。不经过文件系统的缓冲。

2．如何辨别裸设备？

在Unix的/dev 目录下，有许多文件，其中有两个大类：字符设备文件和块设备文件。

字符设备特殊文件进行I/O操作不经过操作系统的缓冲区，而块设备特殊文件用来同外设进行定长的包传输。字符特殊文件与外设进行I/o操作时每次只传输一个字符。而对于块设备特殊文件来说，它用了cache机制，在外设和内存之间一次可以传送一整块数据。裸设备使用字符特殊文件。在/dev 目录下，你可以看到许多这样的文件。

3．使用裸设备的好处

因为使用裸设备避免了再经过Unix操作系统这一层，数据直接从Disk到Oracle进行传输，所以使用裸设备对于读写频繁的数据库应用来说，可以极大地提高数据库系统的性能。当然，这是以磁盘的 I/O 非常大，磁盘I/O已经称为系统瓶颈的情况下才成立。如果磁盘读写确实非常频繁，以至于磁盘读写成为系统瓶颈的情况成立，那么采用裸设备确实可以大大提高性能，最大甚至可以提高至40％，非常明显。

而且，由于使用的是原始分区，没有采用文件系统的管理方式，对于Unix维护文件系统的开销也都没有了，比如不用再维护I-node，空闲块等，这也能够导致性能的提高。

4．如何决定是否应该使用裸设备？

判断是否使用裸设备要从以下方面进行考虑：首先，数据库系统本身需要已经被比较好的经过了优化。优化是一门很有些技术的话题，很难简单地讲述。其次，使用Unix命令来辨别是否存在磁盘读写瓶颈。比如Unix的vmstat, sar 等命令都可以较好的进行鉴别。如果决定采用裸设备，需要磁盘上还有空闲的分区。否则，就要新添磁盘，或者对原有系统重新规划。

5．什么系统必须使用裸设备？

如果使用了Oracle 并行服务器选项，则必须采用裸设备来存放所有的数据文件，控制文件，重做日志文件。只有把这些文件放到裸设备上，才能保证所有Oracle 实例都可以读取这个数据库的文件。这是由Unix操作系统的特性决定的。

还有一种情况是，如果你想使用异步I/O，那么在有些Unix上也必须采用裸设备。这个需要参考具体Unix的相关文档。

6．能够使用一个磁盘的第一个分区作为裸设备吗？

可以，但是不推荐。在Unix的比较旧的版本是银行，磁盘的第一个分区常常包含这个磁盘的一些信息，以及逻辑卷的一些控制信息。若这些部分被裸设备覆盖的话，磁盘就会变得不可识别，导致系统崩溃。

较新的Unix版本不会发生这样的情况，因为它们采用了更复杂的技术来管理磁盘，逻辑卷的一些信息。

但是，除非很确信不要使用磁盘的第一个分区来作为裸设备。

7．我可以把整个裸设备都作为Oracle的数据文件吗？

不行。必须让数据文件的大小稍微小于该裸设备的实际大小。至少要空出两个oracle块的大小来。

8．裸设备应该属于那个用户？

应该由root来创建裸设备，然后再分配给Oracle用户以供使用。同时还要把它归入Oracle用户所在的那个组里边（通常都是DBA）。

9．在创建数据文件时如何指定裸设备？

和普通文件没有什么太大的区别，一样都是在单引号里边写上裸设备的详细路径就可以了。举一个例子：要在创建一个表空间，使用两个裸设备，每个分别为30M的大小，Oracle块的大小为4K，可以用下面的命令：

CREATE TABLESPACE RAW_TS
　　DATAFILE '/dev/raw1' size 30712k
　　DATAFILE '/dev/raw2' size 30712k;

10.Oracle块的大小和裸设备有什么关系吗？

Oracle会必须是裸设备上物理块大小的倍数。

11．如何在裸设备上进行备份？

在裸设备上，不能使用Unix实用程序来进行备份，唯一的办法是使用最基本的Unix命令：DD来进行备份。比如：dd if=/dev/raw1 of=/dev/rmt0 bs=16k。dd的具体语法可以参考unix手册，或者联机帮助。你也可以先用dd把裸设备上的数据文件备份到磁盘上，然后再利用Unix实用程序进一步处理。

12．如果我没有使用Oracle并行服务器选项，我可以在数据库上让一部分数据文件使用文件系统，另一部分使用裸设备吗？

可以。但是这样的话，会使备份过程更加复杂。

13．我应该把联机重做日志文件放到裸设备上吗？

这是一个极好的选择。联机重做日志文件是写操作非常频繁的文件，放到裸设备上非常合适。如果你使用了并行服务器选项，那么联机重做日志文件必须放到裸设备上面。

14．可以把归档日志文件放到裸设备上吗？

不行。归档日志文件必须放到常规的Unix文件系统上面，或者直接放到磁带上面去。

15．我可以在裸设备上边放置多个数据文件吗？

不行。所以你必须在设置裸设备时非常小心。太小的话，会导致空间很快用完，太大的话，空间就白白浪费了。

16．因应该把几个裸设备放到同一个物理磁盘上吗？

这样做不好。因为使用裸设备就是为了提高磁盘读写速度。而把多个裸设备放到同一个物理磁盘上会导致读写竞争，这样对于提高I/O速度是不利的。应该尽量分散裸设备到不同的物理磁盘上，最好是分散到不同的磁盘控制器上。这是最佳选择。

17．需要把所有裸设备都定义成同样的大小吗？

这不是必须得，但是划分成同样的大小对于管理数据库比较有利。

18．为了在Unix上使用裸设备，我需要改变Unix核心参数吗？

不需要。但可以选择减小缓冲区的大小，如果没有别的应用也在同一台Unix机器上运行。因为运用了裸设备以后，不再使用Unix的系统缓冲区。

19．为了提高读写速度，在操作系统级别上，还有什么办法可以采取吗？

使用RAID（廉价冗余磁盘阵列）也是非常有效的办法，尤其实那种读写非常频繁的系统。

20．在考虑了以上所有方面后，还能有什么办法可以提高性能的吗？

这就需要对Oracle 进行优化，并且购买更多的磁盘和磁盘控制器，来分散I/O到不同的磁盘上。

Linux上如何使用裸设备

 

本文不涉及基础概念，只是简单列一下Redhat上创建lvm裸设备的步骤，以供查阅。各个命令的参数可以通过man获得。

1.创建pv

pvcreate -M2 --metadatasize 100M /dev/sda
pvcreate -M2 --metadatasize 100M /dev/sdb1
pvcreate -M2 --metadatasize 100M /dev/sdb2
pvcreate -M2 --metadatasize 100M /dev/sdc

物理卷可以是整个硬盘（lun），也可以是硬盘上的一个分区

2.创建vg

vgcreate vg_db /dev/sda /dev/sdb1 /dev/sdb2 /dev/sdc -s128m

3.创建lv

lvcreate -L2048m -i4 -I64k vg_db -n lv_2g_001
lvcreate -L2048m -i4 -I64k vg_db -n lv_2g_002

4.绑定

raw /dev/raw/raw1 /dev/mapper/vg_db-lv_2g_001
raw /dev/raw/raw2 /dev/mapper/vg_db-lv_2g_002

使用raw命令绑定的裸设备在重启后会失效。所以需要修改/etc/sysconfig/rawdevices配置文件，在文件中加入如下内容（每个裸设备一行）：

/dev/raw/raw1 /dev/mapper/vg_db-lv_2g_001
/dev/raw/raw2 /dev/mapper/vg_db-lv_2g_002

执行 /etc/init.d/rawdevices restart 使配置文件中的裸设备生效

执行 /sbin/chkconfig rawdevices on 保证机器启动的时候裸设备能够加载

5.授权

chown -R oracle.dba /dev/mapper

修改配置文件/etc/udev/permissions.d/50-udev.permissions
注释掉raw/*:root:disk:0660
添加新行raw/*:oracle:dba:0660

6.链接(可选)

ln -s /dev/raw/raw1 /oradata/ningoo/system01.dbf
ln -s /dev/raw/raw2 /oradata/ningoo/undo01.dbf

用裸设备来提高Oracle数据库的性能

 

你需要知道这样一个事实：磁盘I/O是影响Oracle数据库性能的一个重要原因。就本质来说，任何Oracle数据库负责存储数据，从磁盘中查询数据是非常昂贵和费时的操作。

由于许多Oracle系统需要大量的I/O操作，很多Oracle专职人员在碰到大块（DB_BLOCK_SIZE）数据操作时就考虑使用“裸设备”（raw device）。裸设备指得是绕过UNIX 的Journal文件系统（Journal File System ，JFS）直接进行访问的磁盘，这样就省去了JFS文件系统的开销。

磁盘I/O开销的减少可以提高磁盘吞吐量，但是只有在I/O操作确实已经是影响Oracle数据库性能提高的瓶颈的情况下才是这样的。此外，使用裸设备还要求Oracle管理员和系统管理员进行大量的手工劳动。

Oracle建议只有在Oracle数据库性能受到I/O速度限制时才需要考虑使用原始设备，这一点非常重要。对这样的Oracle数据库来说，裸设备可以极大的提高总体性能。但是如果数据库性能没有受I/O速度的制约，使用裸设备并不会对性能提高有所帮助。

还有一点需要说明，在Oracle 8.1.7中，这个特性称之为Direct I/O，某些高端的UNIX平台支持该特性。Veritas公司也销售一个名为Quick I/O的产品，它为Oracle提供了接近于裸设备的性能而无需额外的管理裸设备所需的开销。

Linux裸设备总结（转）

 

这几天看了一下linux下的裸设备管理，做了一些笔记，不敢独享，共享如下：

1、什么裸设备？字符设备？块设备？

裸设备：也叫裸分区（原始分区），是一种没有经过格式化，不被Unix/Linux通过文件系统来读取的特殊字符设备。裸设备可以绑定一个分区，也可以绑定一个磁盘。

字符设备：对字符设备的读写不需要通过OS的buffer。它不可被文件系统mount。

块设备：对块设备的读写需要通过OS的buffer，它可以被mount到文件系统中。

2、一个系统可以有多少个裸设备？

这个与linux的版本相关，在旧版本中，最多只可以有256个裸设备，Linux 4下最多可以绑定8192个裸设备。

但是在linux下，最多只能有255个分区，所以，如果用裸设备绑定分区，最多只能绑定255个裸设备。

如果是用lvm，则没有这个限制。

3、Linux下单个磁盘最多可以有多少个分区？

15个。3个主分区 + 1个扩展分区 + 11个逻辑分区。

建议的分区方法是：先分3个主分区，第四个分区为扩展分区，然后在扩展分区中再分成11个逻辑分区。

注意，裸设备不要绑定在扩展分区上。

4、linux下是否需要绑定裸设备？unix呢？

linux下如果需要使用裸设备，则需要手工进行绑定。

unix下则不用。

因为Unix中每一个块设备都会有一个对应的字符设备用于非缓存(unbuffered)I/O,这就是他对应的裸设备了。

而Linux中rawio的则实现了一套非绑定(unbound)的裸设备/dev/rawN或者/dev/raw/rawN和一个控制设备 /dev/rawct用来把他们绑定到块设备上。所以当需要使用一个裸设备的时候，就需要把他和一个真实存在的块设备对应起来，这一个步骤实际上就是完成 了Unix里的自动对应一个非缓存字符设备。

5、linux如何绑定裸设备？

两种方式：

1）命令绑定

raw /dev/raw/raw[n] /dev/xxx

其中n的范围是0-8191。raw目录不存在可以创建。

执行这个命令，就会在/dev/raw下生成一个对应的raw[n]文件

用命令方式绑定裸设备在系统重启后会失效。

2）修改文件

修改/etc/sysconfig/rawdevices文件如下，以开机时自动加载裸设备，如：
/dev/raw/raw1 /dev/sdb1

这种方式是通过启动服务的方式来绑定裸设备。

也可以把这个命令写在/etc/rc.local上，使每次启动都执行这些命令。

6、如何把裸设备作为oracle数据文件？有什么需要注意的？

1）绑定裸设备

参考上文

2）改变裸设备属主

两种方法：

. 把命令卸载/etc/rc.local上

chown oracle:oinstall /dev/raw/raw1

. 修改/etc/udev/permissions.d/50-udev.permissions文件

将/etc/udev/permissions.d/50-udev.permissions的113行

从

raw/*:root:disk:0660

修改为

raw/*:oracle:oinstall:0660

这个的意思是修改裸设备的默认属主为oracle:oinstall，默认的mode是0660。

如果是用lvm，也需要把逻辑卷绑定到裸设备上，过程和绑定到普通分区类似。

7、使用裸设备作为oracle数据文件有什么需要注意的？

使用裸设备作为oracle的数据文件必须注意以下几点：

1）一个裸设备只能放置一个数据文件

2）数据文件的大小不能超过裸设备的大小

如果是日志文件，则裸设备最大可用大小=裸设备对应分区大小 - 1 * 512 （保留一个redo lock）

如果是数据文件，则裸设备最大可用大小=裸设备对应分区大小 - 2 * db_block_size（保留两个block）

为了简单起见，对所有的文件设置称比裸设备小1M即可。

3）数据文件最好不要设置成自动扩展，如果设置称自动扩展，一定要把maxsize设置设置为比裸设备小

8、是否可以直接用逻辑卷作为oracle数据文件？

linux下oracle不能直接把逻辑卷作为裸设备，也要进行绑定。unix下就不需要。

9、如何知道当前绑定了什么裸设备？

rqw -qa命令列出当前绑定的所有裸设备。

10、如何知道某个裸设备的大小

比较笨的办法是，找出看裸设备对应的是那个实际的块设备，然后用fdisk -l /dev/[h,s]dXN看那个块设备的大小就好了。

比较简单的办法是用blockdev命令来计算，如：

#blockdev --getsize /dev/raw/raw1

11718750

11718750表示有多少OS BLIOCK。

一般一个OS BLOCK大小是512字节，所以11718750*512/1024/1024/1024 = 5722(m) 就是裸设备的大小。

11、数据库中可以同时以文件和裸设备作为数据文件吗？

可以。甚至在同一个表空间中，也可以部分数据文件用文件系统，部分文件用裸设备。

但是不建议这样做，因为会增加管理的复杂度。

12、可以把至于裸设备的数据文件设成自动扩展吗？

可以，但同时要设置maxsize，且maxsize不能超过：裸设备大小 - 2*db_block_size

13、如何修改裸设备的默认权限

两种方法：

1）要修改/etc/rc.d/rc.local文件,加入如下:

chown root:oinstall /dev/raw/raw1

chown root:oinstall /dev/raw/raw2

chown root:oinstall /dev/raw/raw3

...

chmod 660 /dev/raw/raw1

chmod 660 /dev/raw/raw2

chmod 660 /dev/raw/raw3

...

2）实际上还有更简单的方法就是,修改/etc/udev/permissions.d/50-udev.permissions文件:

raw/*:root:disk:0660

为

raw/*:root:oinstall:0660

这样就可以了!

14、如何取消裸设备的绑定

用raw把major and minor设成0就可以取消裸设备的绑定。如：

raw /dev/raw/raw1 0 0

这个命令取消绑定裸设备的绑定，/dev/raw/raw1会被删除

15、裸设备可以绑定的对象可以什么？

可以绑定整个没有分区的硬盘、可以绑定硬盘的某个分区、可以绑定逻辑卷等。

 

来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/16566331/viewspace-670118/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/16566331/viewspace-670118/