linux+gpfs配置文件,GPFS 在 Linux 集群中的灾难恢复

GPFS 文件系统相关介绍

IBM General Parallel File System(GPFS) 是高性能、可扩展、并行文件系统。通过它，可以构建一个高可用、高性能的大型 Linux 计算机集群。GPFS 提供了强大的灾难恢复功能。从而，通过 GPFS 可以构建高可用的 Linux 集群。

GPFS 文件系统

GPFS 是一个并行的共享磁盘文件系统，它保证在资源组内的所有节点可以并行访问整个文件系统。GPFS 允许客户共享文件，而这些文件可能分布在不同节点的不同硬盘上。它提供了标准的 UNIX 文件系统接口。GPFS 能够很好的支持 UNIX 文件系统的工具，用户可以在 Linux 集群中像使用普通文件系统一样使用 GPFS 文件系统。它可以很好的应用在 Linux 集群中。

GPFS 节点可能发生的问题

GPFS 是由多个节点组成的集群系统，我们在 GPFS 长期运行过程中，可能有软件问题，比如集群中某个节点 GPFS 文件系统崩溃；也可能有硬件问题，比如系统磁盘坏掉，这样就会导致集群中某个节点不能工作。这些问题在 GPFS 集群长期运行过程中都是很可能遇到的问题，在遇到这种问题后，我们执行“mmgetstate – a”就会发现问题节点的状态不正常。状态“active”表示正常，其他状态都是异常。

node1:~ # mmgetstate -a

Node number Node name GPFS state

------------------------------------------

1 node1 active

2 node2 active

3 node3 unknown

用户针对这种情况都想尽快能够恢复整个集群的正常工作，把坏掉的节点尽快恢复工作。

GPFS 文件系统的灾难恢复(容灾特性)

GPFS 文件系统提供了很多特性可以来支持 GPFS 文件系统在发生问题时能够很好的进行灾难恢复使整个集群继续工作。首先 GPFS 是一个支持多节点的并行式文件系统，整个集群采用网络共享磁盘的方式，当其中任何一个节点发生问题时，其它节点能够及时接管问题节点的任务，从而保证整个集群能够继续工作。这样保证在集群中的其它节点健康的情况下可以及时接管问题节点的任务，我们可以尽快对问题节点进行恢复。

Linux 集群中 GPFS 灾难恢复方法及相关命令简介

我们通常在采用 GPFS 的 Linux 集群中某个节点发生硬件或者文件系统崩溃而不能正常工作时，那么整个集群中就会出现问题的节点。为了使原来的集群的所有节点都能健康的工作，我们可以有两种方法：一是把坏掉的节点从原有的集群中移除掉；二是把坏掉的节点的硬件问题解决之后重装该节点，并重新添加进 GPFS 集群中。下面我们来分别介绍两种方案。

方案一：通过移除 GPFS 问题节点来恢复

方案描述：

如果集群中有节点的硬件或者软件发生严重问题时，我们可以先把该节点从整个集群中移除掉，这样集群中就没有这个坏掉的节点，我们可以通过“mmgetstate – a”得到所有的节点都是“active”的状态。

方案流程 :

我们要从集群中移除掉坏掉的节点，就要改变记录整个 GPFS 集群配置信息的文件，把坏掉节点的信息删除，使 GPFS 集群中都没有坏掉节点的信息，这样这个坏掉节点就能够删除掉了。如下图所示，我们可以看到图中，本来三个节点的 GPFS 集群中，第三个节点坏了，我们把该问题节点移除后就成为一个只包含两个健康节点的集群。

图 1. 移除 GPFS 问题节点流程图

 

方案二：通过重装问题节点来恢复

方案描述：

当然还有另外一种方法就是，无论问题节点是发生硬件或者文件系统崩溃，我们在把硬件问题首先解决后，重装这个节点并把它加入我们的 GPFS 集群中来。下面我们对这种方案的实现进行介绍。

方案流程：

首先对原 GPFS 集群中配置信息文件 mmsdrfs 进行备份，对问题节点重装，把原有的 GPFS 配置信息文件还原到原来节点上面，使这个记录 GPFS 节点信息的配置文件能够生效我们需要对 GPFS 集群进行刷新。如图 2 所示，