linux 基于RHCS套件的高可用集群配置

RHCS套件

RHCS全称RedHatClusterSuit红帽集群套件，相对于其他集群配置rhcs配置略显复杂且牵扯内容比较多，但是就稳定性与可靠性而言rhcs是毋容质疑的。下面就自己对rhcs理解说明一下rhcs的概念。主要包括七个方面（2.1-2.7）。

1.1RHCS有那些功能

既然RHCS是一个集群套件，因为进群功能有多种如高性能、负载均衡、高可用，那么RHCS实现什么功能。RHCS通过cman/集群高可用管理器实现高可用，通过LVS实现网络层负载均衡。同时RHCS通过支持GFS与iSCSI提供集群共享存储的功能。

这里需要说明iSCSI是一种存储方案而GFS是一种文件系统，多个客户机通过iSCSI这种存储技术通过网络对远程存储进行高性能数据传输，GFS提供多节点数据共享方案。

1.2集群高可用工具

高可用工具：keepalived、heartbeat

1.3集群负载均衡工具

负载均衡调度器：LVS、HAProxy、Nginx

1.4集群数据一致性

（1）无共享体系结构：

每个节点单独使用本地存储，数据一致性需要一套数据复制机制保证各个节点数据保持一致如DRBD，大多数主流数据库，如IBM DB2企业版、Microsoft Cluster Server，已经实现无共享集群

（2）共享磁盘体系结构：

共享磁盘“某个时刻”只有一个集群中的一个节点来对磁盘进行完全的操作，在高级集群中如果需要其他节同时访问数据，需要完全操作的节点向他节点提供文件系统，因此此节点将成为集群性能瓶颈。如Veritas Cluster Servers已实现。

（3）完全共享体系结构

完全共享结构可以提供集群内所有节点访问，不过这种方式通常通过一个共享通道进行I/O操作所以需要一套机制来保证数据一致性DLM。如RHCS集群中的GFS文件系统可以实现。

通过实验来了解

配置环境

server1 安装ricci luci  nginx

server3  安装ricci  nginx

server4  安装httpd  默认关闭

server5 安装httpd 默认关闭

在所有srever上添加地址解析

在需要安装套件的server上重新配置yum  将套件所在包添加进去

 

配置 ricci  luci

关闭iptables  ricci luci 开机自启动

在server1  3 上配置nginx  

可以有安装完成的nginx服务器scp发送一份  scp  /usr/local/nginx  root@server1:/usr/local

发送后在server上添加用户 和创建软连接

在server1 3 上下载ricci  在server1上下载luci（图形管理界面只需要一个）

在  server1 3上  /etc/init.d/目录下添加nginx管理脚本  chmod +x     脚本代码于文章末尾

 

进入浏览通过套件添加集群

启动luci

使用  root账户登陆

开始添加集群

添加nod节点时  出现错误 清除   >/ etc/clustr/clustr.conf 就可以重新添加

 

 

测试

在添加vip后 vip随着服务的关闭会迁移至另一个nginx服务器 以达到高可用的目的

可以看到关闭server1后  vip漂移到server3上

nginx脚本

#!/bin/sh
#
# nginx - this script starts and stops the nginx daemon
#
# chkconfig:   - 85 15
# description:  Nginx is an HTTP(S) server, HTTP(S) reverse \
#               proxy and IMAP/POP3 proxy server
# processname: nginx
# config:      /usr/local/nginx/conf/nginx.conf
# pidfile:     /usr/local/nginx/logs/nginx.pid

# Source function library.
. /etc/rc.d/init.d/functions

# Source networking configuration.
. /etc/sysconfig/network

# Check that networking is up.
[ "$NETWORKING" = "no" ] && exit 0

nginx="/usr/local/nginx/sbin/nginx"
prog=$(basename $nginx)

lockfile="/var/lock/subsys/nginx"
pidfile="/usr/local/nginx/logs/${prog}.pid"

NGINX_CONF_FILE="/usr/local/nginx/conf/nginx.conf"


start() {
    [ -x $nginx ] || exit 5
    [ -f $NGINX_CONF_FILE ] || exit 6
    echo -n $"Starting $prog: "
    daemon $nginx -c $NGINX_CONF_FILE
    retval=$?
    echo
    [ $retval -eq 0 ] && touch $lockfile
    return $retval
}

stop() {
    echo -n $"Stopping $prog: "
    killproc -p $pidfile $prog
    retval=$?
    echo
    [ $retval -eq 0 ] && rm -f $lockfile
    return $retval
}

restart() {
    configtest_q || return 6
    stop
    start
}

reload() {
    configtest_q || return 6
    echo -n $"Reloading $prog: "
    killproc -p $pidfile $prog -HUP
    echo
}

configtest() {
    $nginx -t -c $NGINX_CONF_FILE
}

configtest_q() {
    $nginx -t -q -c $NGINX_CONF_FILE
}

rh_status() {
    status $prog
}

rh_status_q() {
    rh_status >/dev/null 2>&1
}

# Upgrade the binary with no downtime.
upgrade() {
    local oldbin_pidfile="${pidfile}.oldbin"

    configtest_q || return 6
    echo -n $"Upgrading $prog: "
    killproc -p $pidfile $prog -USR2
    retval=$?
    sleep 1
    if [[ -f ${oldbin_pidfile} && -f ${pidfile} ]];  then
        killproc -p $oldbin_pidfile $prog -QUIT
        success $"$prog online upgrade"
        echo 
        return 0
    else
        failure $"$prog online upgrade"
        echo
        return 1
    fi
}

# Tell nginx to reopen logs
reopen_logs() {
    configtest_q || return 6
    echo -n $"Reopening $prog logs: "
    killproc -p $pidfile $prog -USR1
    retval=$?
    echo
    return $retval
}

case "$1" in
    start)
        rh_status_q && exit 0
        $1
        ;;
    stop)
        rh_status_q || exit 0
        $1
        ;;
    restart|configtest|reopen_logs)
        $1
        ;;
    force-reload|upgrade) 
        rh_status_q || exit 7
        upgrade
        ;;
    reload)
        rh_status_q || exit 7
        $1
        ;;
    status|status_q)
        rh_$1
        ;;
    condrestart|try-restart)
        rh_status_q || exit 7
        restart
        ;;
    *)
        echo $"Usage: $0 {start|stop|reload|configtest|status|force-reload|upgrade|restart|reopen_logs}"
        exit 2
esac