linux 测试多路径,linux 多路径软件DM multipath的安装和测试

最新推荐文章于 2024-04-20 21:04:36 发布
最新推荐文章于 2024-04-20 21:04:36 发布
阅读量556 收藏 1
点赞数
文章标签： linux 测试多路径

多路径软件是为了解决单路径一对一的单点故障而研发的，实现由主机到存储的多条链路通讯。如果存储服务器到主机或是交换机只有一条线路的时候，当这条线路出现故障时，整个系统就无法使用，所以使用多路径可以解决这个问题，避免点单故障。

多路径软件主要是配合存储一起使用，实现故障切换和恢复、IO流量负载均衡和硬盘的虚拟化操作。

在做DM multipath测试前需要配置存储，在这里我们使用上章节博客写的IP SAN存储设备。

测试服务器如下，另外需要安装DM multipath 多路径套件(device-mapper-multipath)

服务名称

服务器地址

服务端 ：node01

192.168.137.101

客户端 ：node02

192.168.137.102

使用vmvare模拟多路径，我们需要为虚拟机配置两张网卡，实现互通。在这里我们将node01配置服务端，将/dev/sdb1 通过ip scan共享。

在博客http://blog.itpub.net/27039319/viewspace-2123341/基础上编辑/etc/tgt/targets.conf文件，增加新建立网卡地址192.168.20.XXX。内容如下

1.修改服务端node01的tgt服务

点击(此处)折叠或打开

[root@node01 network-scripts]# vi /etc/tgt/targets.conf

backing-store /dev/sdb1

initiator-address 192.168.137.102

initiator-address 192.168.20.102

vendor_id node

product_id target4

[root@node01 network-scripts]# service tgtd restart

Stopping SCSI target daemon:                               [  OK  ]

Starting SCSI target daemon:                               [  OK  ]

[root@node01 ~]# tgt-admin  -show

Target 1: iqn.2016-08.cn.node01.www:target4_scan

System information:

Driver: iscsi

State: ready

I_T nexus information:

LUN information:

LUN: 0

Type: controller

SCSI ID: IET     00010000

SCSI SN: beaf10

Size: 0 MB, Block size: 1

Online: Yes

Removable media: No

Prevent removal: No

Readonly: No

Backing store type: null

Backing store path: None

Backing store flags:

LUN: 1

Type: disk

SCSI ID: IET     00010001

SCSI SN: beaf11

Size: 5379 MB, Block size: 512

Online: Yes

Removable media: No

Prevent removal: No

Readonly: No

Backing store type: rdwr

Backing store path: /dev/sdb1

Backing store flags:

Account information:

ACL information:

192.168.137.102

192.168.20.102

[root@node01 ~]#

2. 在客户端node02上增加 192.168.20.101线路，这样就与192.168.137.101 实现双线路

点击(此处)折叠或打开

[root@node02 ~]# iscsiadm -m discovery -t st -p 192.168.20.101:3260    #增加新线路192.168.20.101 ,添加成功

192.168.20.101:3260,1 iqn.2016-08.cn.node01.www:target4_scan

[root@node02 ~]# lsblk            #查看块信息 并无其他新信息

NAME   MAJ:MIN RM  SIZE RO TYPE MOUNTPOINT

sda      8:0    0   20G  0 disk

├─sda1   8:1    0  200M  0 part /boot

├─sda2   8:2    0   10G  0 part /

└─sda3   8:3    0    1G  0 part [SWAP]

sr0     11:0    1  3.6G  0 rom

sdb      8:16   0    5G  0 disk

└─sdb1   8:17   0    5G  0 part

[root@node02 ~]# tree /var/lib/iscsi/         #查看/var/lib/iscsi 目录信息，发现新增加的192.168.20.101线路信息

/var/lib/iscsi/

├── ifaces

├── isns

├── nodes

│   └── iqn.2016-08.cn.node01.www:target4_scan

│       ├── 192.168.137.101,3260,1

│       │   └── default

│       └── 192.168.20.101,3260,1

│           └── default

├── send_targets

│   ├── 192.168.137.101,3260

│   │   ├── iqn.2016-08.cn.node01.www:target4_scan,192.168.137.101,3260,1,default -> /var/lib/iscsi/nodes/iqn.2016-08.cn.node01.www:target4_scan/192.168.137.101,3260,1

│   │   └── st_config

│   └── 192.168.20.101,3260

│       ├── iqn.2016-08.cn.node01.www:target4_scan,192.168.20.101,3260,1,default -> /var/lib/iscsi/nodes/iqn.2016-08.cn.node01.www:target4_scan/192.168.20.101,3260,1

│       └── st_config

├── slp

└── static

13 directories, 4 files

[root@node02 ~]# /etc/init.d/iscsi restart               #restart iscsi服务

Stopping iscsi: [ OK ]

Starting iscsi: [ OK ]

[root@node02 ~]# lsblk                                   #未分区，就看到新增 sdc1

NAME   MAJ:MIN RM  SIZE RO TYPE MOUNTPOINT

sda      8:0    0   20G  0 disk

├─sda1   8:1    0  200M  0 part /boot

├─sda2   8:2    0   10G  0 part /

└─sda3   8:3    0    1G  0 part [SWAP]

sr0     11:0    1  3.6G  0 rom

sdb      8:16   0    5G  0 disk

└─sdb1   8:17   0    5G  0 part

sdc      8:32   0    5G  0 disk

└─sdc1   8:33   0    5G  0 part

[root@node02 opt]# mount /dev/sdc1 /opt/

[root@node02 opt]# ll

total 0

[root@node02 opt]# cd /opt/               #挂载sdc1 可以看到上面博客中提到的信息。在node03上写入的passwd 文件

[root@node02 opt]# ll

total 40

-rw------- 1 root root   980 Aug 12 00:59 anaconda-ks.cfg

-rw-r--r-- 1 root root 10197 Aug 12 00:59 install.log

-rw-r--r-- 1 root root  3161 Aug 12 00:59 install.log.syslog

drwx------ 2 root root 16384 Aug 12 00:58 lost+found

-rw-r--r-- 1 root root   901 Aug 12 01:11 passwd

[root@node02 opt]#

[root@node02 ~]#

########在服务端查看3260端口信息 发现新线路192.168.20.101 #######

[root@node01 ~]# netstat -antup |grep 3260

tcp        0      0 0.0.0.0:3260                0.0.0.0:*                   LISTEN      1028/tgtd

tcp        0      0 192.168.137.101:3260        192.168.137.102:58788       ESTABLISHED 1028/tgtd

tcp        0      0 192.168.20.101:3260         192.168.20.102:57592        ESTABLISHED 1028/tgtd

tcp        0      0 :::3260                     :::*                        LISTEN      1028/tgtd

[root@node01 ~]#

3 配置multipath 多路径软件，配置多路径冗余模式

点击(此处)折叠或打开

[root@node02 opt]# yum -y install device-mapper-multipath                  #安装软件

[root@node02 opt]# cp /usr/share/doc/device-mapper-multipath-0.4.9/multipath.conf /etc/        #默认情况下 无配置文件的。需要从/usr/share/doc/目录下拷贝

[root@node02 opt]# /etc/init.d/multipathd restart                          #启动软件

ux_socket_connect: No such file or directory

Stopping multipathd daemon: [FAILED]

Starting multipathd daemon: [ OK ]

[root@node02 opt]#

[root@node02 opt]# multipath -ll                                          #未发现多路径信息  这里需要把原有mount的卸载

[root@node02 opt]#

[root@node02 opt]# umount /opt/

umount: /opt: device is busy.

(In some cases useful info about processes that use

the device is found by lsof(8) or fuser(1))

[root@node02 opt]# cd

[root@node02 ~]# umount /opt/

[root@node02 ~]# multipath -ll

[root@node02 ~]# /etc/init.d/multipathd restart                          #卸载后重启  发现多路径信息

ok

Stopping multipathd daemon: [ OK ]

Starting multipathd daemon: [ OK ]

[root@node02 ~]# multipath -ll

mpatha (1IET 00010001) dm-0 node,target4                        #'1IET 00010001'表示远程设备信息 dm-0  node 表示厂商  target4 产品信息  这种情况就可以实现单点故障切换

size=5.0G features='0' hwhandler='0' wp=rw

|-+- policy='round-robin 0' prio=1 status=active                #status=active  默认使用的链路

| `- 36:0:0:1 sdb 8:16 active ready running

`-+- policy='round-robin 0' prio=1 status=enabled               #status=enabled 有效链路，但是不是活动链路

`- 35:0:0:1 sdc 8:32 active ready running

[root@node02 ~]#

[root@node02 ~]# ll /dev/mapper/                                #设备文件 /dev/mapper/mpatha ，生成dm设备

total 0

crw-rw---- 1 root root 10, 57 Aug 12 17:26 control

lrwxrwxrwx 1 root root 7 Aug 12 18:36 mpatha -> ../dm-0

lrwxrwxrwx 1 root root 7 Aug 12 18:36 mpathap1 -> ../dm-1

[root@node02 ~]# mount /dev/mapper/mpathap1 /opt/               #挂载mpathap1  存储可用

[root@node02 ~]# ll !$

ll /opt/

total 40

-rw------- 1 root root 980 Aug 12 00:59 anaconda-ks.cfg

-rw-r--r-- 1 root root 10197 Aug 12 00:59 install.log

-rw-r--r-- 1 root root 3161 Aug 12 00:59 install.log.syslog

drwx------ 2 root root 16384 Aug 12 00:58 lost+found

-rw-r--r-- 1 root root 901 Aug 12 01:11 passwd

[root@node02 opt]# rm passwd

rm: remove regular file `passwd'? yes

[root@node02 opt]# ll

total 36

-rw------- 1 root root   980 Aug 12 00:59 anaconda-ks.cfg

-rw-r--r-- 1 root root 10197 Aug 12 00:59 install.log

-rw-r--r-- 1 root root  3161 Aug 12 00:59 install.log.syslog

drwx------ 2 root root 16384 Aug 12 00:58 lost+found

[root@node02 opt]#

4. 配置负载模式 编辑/etc/multipath.conf 文件，修改如下信息

点击(此处)折叠或打开

[root@node02 opt]#vim /etc/multipath.conf

multipaths {

multipath {

wwid"1IET 00010001"                        #wwid 可以通过scsi_id生成  同时也multipath -ll 看到mpatha (1IET     00010001)远程存储信息

alias yellow                                #dm 别名 ，可以随便修改

path_grouping_policy multibus

path_checker readsector0

path_selector"round-robin 0"

failback manual

rr_weight priorities                        #权重信息

no_path_retry 5

}

}

[root@node02 ~]# /lib/udev/scsi_id  --page=0x83 --whitelisted --device=/dev/sdb  #生成wwid

1IET     00010001

[root@node02 ~]# /lib/udev/scsi_id  --page=0x83 --whitelisted --device=/dev/sdc

1IET     00010001

[root@node02 ~]# multipath -ll

Aug 12 19:26:35 | multipath.conf line 67, invalid keyword: path_checker

mpatha (1IET     00010001) dm-0 node,target4

size=5.0G features='0' hwhandler='0' wp=rw

|-+- policy='round-robin 0' prio=1 status=active

| `- 36:0:0:1 sdb 8:16 active ready running

`-+- policy='round-robin 0' prio=1 status=enabled

`- 35:0:0:1 sdc 8:32 active ready running

[root@node02 ~]#

[root@node02 opt]# /etc/init.d/multipathd  restart      #重启multipath服务

ok

Stopping multipathd daemon:                                [  OK  ]

Starting multipathd daemon:                                [  OK  ]

[root@node02 opt]# /etc/init.d/iscsi restart            #重启  识别scsi

Stopping iscsi:                                            [  OK  ]

Starting iscsi:                                            [  OK  ]

[root@node02 opt]# multipath -ll

Aug 12 20:05:52 | multipath.conf line 67, invalid keyword: path_checker

yellow (1IET     00010001) dm-0 node,target4

size=5.0G features='1 queue_if_no_path' hwhandler='0' wp=rw

`-+- policy='round-robin 0' prio=1 status=active            #启用负载均衡模式

|- 38:0:0:1 sdb 8:16 active ready running

`- 37:0:0:1 sdc 8:32 active ready running

[root@node02 opt]#

[root@node02 opt]# ll /dev/mapper/                          #查看/dev/mapper 下的设备信息 由原来的mpathp 变更为multipath.conf 文件中更新的别名 yellow了

total 0

crw-rw---- 1 root root 10, 57 Aug 12 17:26 control

lrwxrwxrwx 1 root root      7 Aug 12 20:05 yellow -> ../dm-0

lrwxrwxrwx 1 root root      7 Aug 12 20:05 yellowp1 -> ../dm-1

[root@node02 ~]# umount /opt/

[root@node02 ~]# mount /dev/mapper/yellowp1 /opt/           #重新挂载dm

[root@node02 ~]# cd !$

cd /opt/

[root@node02 opt]# ll

total 40

-rw------- 1 root root   980 Aug 12 00:59 anaconda-ks.cfg

-rw-r--r-- 1 root root 10197 Aug 12 00:59 install.log

-rw-r--r-- 1 root root  3161 Aug 12 00:59 install.log.syslog

drwx------ 2 root root 16384 Aug 12 00:58 lost+found

-rw-r--r-- 1 root root   901 Aug 12 20:08 passwd

[root@node02 opt]#

5. 模拟故障 ，分别关闭网卡eth0和eth1  看看链路高可用性，切换过程大概需要1分钟时间

点击(此处)折叠或打开

[root@node01 ~]# ifdown eth1

[root@node01 ~]#

[root@node02 opt]# multipath -ll

Aug 12 20:16:57 | multipath.conf line 67, invalid keyword: path_checker

yellow (1IET 00010001) dm-0 node,target4

size=5.0G features='1 queue_if_no_path' hwhandler='0' wp=rw

`-+- policy='round-robin 0' prio=1 status=active

|- 38:0:0:1 sdb 8:16 failed faulty running                                          #状态改变

`- 37:0:0:1 sdc 8:32 active ready running

[root@node02 opt]# ll

total 40

-rw------- 1 root root 980 Aug 12 00:59 anaconda-ks.cfg

-rw-r--r-- 1 root root 10197 Aug 12 00:59 install.log

-rw-r--r-- 1 root root 3161 Aug 12 00:59 install.log.syslog

drwx------ 2 root root 16384 Aug 12 00:58 lost+found

-rw-r--r-- 1 root root 901 Aug 12 20:08 passwd

[root@node02 opt]# cp /etc/localtime /opt/                                          #测试写入  正常

[root@node02 opt]# ll

total 44

-rw------- 1 root root 980 Aug 12 00:59 anaconda-ks.cfg

-rw-r--r-- 1 root root 10197 Aug 12 00:59 install.log

-rw-r--r-- 1 root root 3161 Aug 12 00:59 install.log.syslog

-rw-r--r-- 1 root root 405 Aug 12 20:17 localtime

drwx------ 2 root root 16384 Aug 12 00:58 lost+found

-rw-r--r-- 1 root root 901 Aug 12 20:08 passwd

谛听汪
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
RHEL 6.5----iscsi多路径存储
DB2_c的博客
06-04 350
RHEL 6.5----iscsi多路径存储 主机名 IP master eth0: 192.168.30.130(NAT) eth1: 192.168.17.130(VMNet4) node-1 eth0: 192.168.30.131(NAT) eth1: 192.168.17.131(VMNet4)             ...
linux 多路径软件DM multipath的安装和测试
congjiong8459的博客
08-12 384
多路径软件是为了解决单路径一对一的单点故障而研发的，实现由主机到存储的多条链路通讯。如果存储服务器到主机或是交换机只有一条线路的时候，当这条线路出现故障时，整个系统就无法使用，所以使用多路径可以解决这个问题，避免点单故障。 ...
【linux】多路径|Multipath I/O 技术
最新发布
bandaoyu的note
04-20 1876
普通的电脑主机都是一个硬盘挂接到一个总线上，这里是一对一的关系。而到了分布式环境，主机和存储网络连接中间每一层可能存在多块网卡多个交换机可选就构成了多对多的关系。也就是说，主机到存储可以有多条路径可以选择。主机到存储之间的IO由多条路径可以选择那么就有以下问题需要解决1 )每条路径如何表达?2 )I/O流量如何选择路径?3)流量如何在多条路径之间分配?负载均衡4)其中一条路径坏掉了，如何处理?高可用第一条比较简单。
Linux下挂载iscsi存储及多路径功能配置
weixin_33910460的博客
06-03 1511
一、简介iSCSI（internet SCSI）技术由IBM公司研究开发，是一个供硬件设备使用的、可以在IP协议的上层运行的SCSI指令集，这种指令集合可以实现在IP网络上运行SCSI协议，使其能够在诸如高速千兆以太网上进行路由选择。iSCSI技术是一种新储存技术，该技术是将现有SCSI接口与以太网络(Ethernet)技术结合，使服务器可与使用IP网络的储存装置互相交换资料。iSCSI是一种基于...
Linux平台的多路径软件multipath的使用案例
数据库生态圈（RDB & NoSQL & Bigdata）——专注于关系库优化（Oracle&Mysql&PG&SQL Server ）
03-11 785
本文源自：http://blog.itpub.net/23135684/viewspace-745789/ 在Linux和AIX平台都有一部分存储产品使用操作系统自带的多路径软件，包括最常见的HP和IBM的部分存储产品，在Linux自带的多路径软件叫做multipath，这篇文章以IBM N系列存储在Linux平台的使用为例，讨论Linux平台multipath的使用。 1.确保安装以下的...
LINUX下多路径（multi-path）介绍及使用
小二
07-01 1776
LINUX下多路径（multi-path）介绍及使用 一、什么是多路径 普通的电脑主机都是一个硬盘挂接到一个总线上，这里是一对一的关系。而到了有光纤组成的SAN环境，或者由iSCSI组成的IPSAN环境，由于主机和存储通过了光纤交换机或者多块网卡及IP来连接，这样的话，就构成了多对多的关系。也就是说，主机到存储可以有多条路径可以选择。主机到存储之间的IO由多条路径可以选择。每个主机到所
红帽 Linux6 设备映射多路径 DM Multipath 配置及管理
10-20
红帽 Linux6 设备映射多路径 DM Multipath 配置及管理
Multipathd多路径配置
03-04
DM-MultiPath 是一个设备映射器多路径，它可以将服务器节点和存储阵列间的多个 IO 路径配置为一个单一设备。这些 IO 路径可以包含独立电缆、交换机以及控制器的物理 SAN 连接。DM-MultiPath 集合了 IO 路径，并生成...
Redhat7 Udev绑定（DM multipath）多路径设备.docx
06-28
"Redhat7 Udev绑定（DM multipath）...在Redhat7系统中，使用Udev绑定（DM multipath）多路径设备可以提高存储系统的可靠性和性能。通过编写Udev规则文件，可以实现多路径设备的绑定关系，从而简化存储系统的管理工作。
linux下多路径的介绍和安装配置归纳.pdf
11-04
在Linux系统中，Red Hat和SUSE的2.6内核自带了免费的多路径软件包`device-mapper-multipath`，支持多种存储设备，包括一些非主流厂商的产品。不过，某些特定厂商的多路径软件可能需要额外购买许可证，例如EMC的Linux...
Red Hat Enterprise Linux 5 DM Multipath
04-10
在 Red Hat Enterprise Linux 5 中，DM Multipath 是一个默认安装的组件，可以通过命令行工具或图形化界面来配置和管理多路径存储系统。 DM Multipath 的配置文件位于 /etc/multipath.conf，管理员可以通过编辑该...
LINUX下多路径(multi-path)介绍及使用
04-19
本文档介绍和指导如何在Linux服务器上部署配置多路径软件，可以为想在Linux服务器上挂载磁盘阵列设备的技术人员提供一定的参考。
linux 下多路径软件的安装配置
08-09
介绍了linux 下多路径软件的安装配置，主要针对IBM 服务器和存储。
linux安装系统时安装多路径包,红帽子linux安装配置多路径
weixin_34634720的博客
05-03 530
修改源 为本地isoyum imstall device-mapper*-#安装多路径软件rpm -aq|grep multipath-#查询多路径安装状态modprobe dm-multipath (加载dm-multipath内核模块)-#系统启动时缺省地不加载这个模块。如果应用部署需要，可以在系统启动时定制。/etc/init.d/multipathd start-#启动multipath...
multipath配置详细参考
数据库生态圈（RDB & NoSQL & Bigdata）——专注于关系库优化（Oracle&Mysql&PG&SQL Server ）
11-14 4468
1.配置文件结构及位置 multipath配置文件/etc/multipath.conf由节（section），子节（sub-section），属性（atribute）和属性值（value）等组成，其结构具体如下所示： <section> { <attribute> <value> ... <subsection> { ...
对存储多路径的测试
Warrior 技术大杂论
06-04 2116
下面对配置好的多路径进行测试，查看多路径： [root@elt1 ~]# multipath -ll mpathe (3600c0ff00026402cf4cf5d5601000000) dm-1 DotHill,DH3000 size=47G features='0' hwhandler='0' wp=rw |-+- policy='round-robin 0' prio=1 statu
linux下多路径dm不一致,DM多路径存储
weixin_34246474的博客
05-11 469
什么是 multipath？普通的电脑主机都是一个硬盘挂接到一个总线上,这里是一对一的关系。而到了有光纤组成的SAN 环境,由于主机和存储通过了光纤交换机连接,这样的话,就构成了多对多的关系。也就是说,主机到存储可以有多条路径可以选择。主机到存储之间的IO 由多条路径可以选择。既 然,每个主机到所对应的存储可以经过几条不同的路径,如果是同时使用的话,I/O 流量如何分配?其中一条路径坏掉了,如何处...
linux系统修复磁盘映射,Multipath映射的磁盘的问题，谢谢！
weixin_32626635的博客
05-09 363
Multipath映射的磁盘的问题，谢谢！发布时间:2011-10-26 14:28:50来源:红联作者:dengbao2001[i=s] 本帖最后由 dengbao2001 于 2011-10-26 15:08 编辑 [/i]我有一个Compellent存储，给一台RHEL5.5的服务器划算了2个卷，通过编辑Multipath.conf文件，两个卷分别被识别了。但是我需要正常将两个卷从RHEL5...
Multipath实现LUN设备名称的持久化
热门推荐
David Dai -- Focus on Oracle
11-01 2万+
<br /> <br /> <br />之前用openfiler 搭建了一个虚拟的存储。并且用udev 动态管理实现了设备的持久化。这块的知识参考我的blog：<br />openfiler 搭建虚拟存储并配置服务端<br />       http://blog.csdn.net/tianlesoftware/archive/2010/10/29/5973222.aspx<br /> <br />实现设备名称的持久化有两种工具：Udev 和 Multipath.  Udev的东西，昨天的实验已经做了说明。
cgsl linux 安装多路径软件
05-14
在使用CGSL Linux操作系统时，如果需要安装多路径软件，可以按照以下步骤进行操作： 1.安装 multipath 工具 使用以下命令进行安装：sudo yum install multipath 2.配置 multipath 在 /etc/multipath.conf 中进行...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值