Keepalived+Nginx实现高可用和双主节点负载均衡

最新推荐文章于 2024-01-22 09:38:42 发布
最新推荐文章于 2024-01-22 09:38:42 发布
阅读量2.4k 收藏
点赞数
分类专栏： 性能调优
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/enweitech/article/details/16818057
版权
简介


Nginx可以实现高并发反向代理，lvs集群可以实现负载均衡，但是他们都有一个共同的弊端，就是Nginx，lvs架构中Director是单点故障，有没有一个好的方案解决这个问题呢？答案是有。通过Keepalived就可以实现，前端Nginx，lvs中Director服务器的高可用和负载均衡，通过shell命令或者脚本可以实现对服务器状态和服务的监控！


一、环境介绍
1、系统环境及软件版本
操作系统：CentOS6.4-i386
软件版本：Nginx-1.4.2
keepalived-1.2.7
yum源：
# vim /etc/yum.repos.d/centos6.repo
[base] 
name=centos-base 
baseurl=http://mirrors.sohu.com/centos/$releasever/os/$basearch 
gpgcheck=1 
enable=1 
gpgkey=http://mirrors.sohu.com/centos/RPM-GPG-KEY-CentOS-6
[epel] 
name=Fedora-epel 
baseurl=http://mirrors.sohu.com/fedora-epel/$releasever/$basearch/ 
enable=1 
gpgcheck=0


提示：如果你的系统是centos，系统默认的yum源是可以用的
2、拓扑图






3、IP地址规划
Client: 172.16.254.28
Keepalived+Nginx1: 172.16.3.3 Vip: 172.16.3.100
Keepalived+Nginx2: 172.16.3.4 Vip: 172.16.3.200




二、安装
1、安装keepalived
[root@node1 ~]# yum install keepalived


2、编译安装Nginx


[root@node1 ~]#useradd -r nginx 
[root@node1 ~]#yum -y groupinstall "Development tools" "Server  Platform Development" 
[root@node1 ~]#yum -y install pcre-devel 
[root@node1 ~]#tar xf nginx-1.4.2.tar.gz 
[root@node1 ~]#cd nginx-1.4.2 
[root@node1 nginx-1.4.2]# ./configure \ 
--prefix=/usr\ 
--sbin-path=/usr/sbin/nginx\ 
--conf-path=/etc/nginx/nginx.conf \ 
--error-log-path=/var/log/nginx/error.log \ 
--http-log-path=/var/log/nginx/access.log \ 
--pid-path=/var/run/nginx/nginx.pid  \ 
--lock-path=/var/lock/nginx.lock \ 
--user=nginx \ 
--group=nginx \ 
--with-http_ssl_module \ 
--with-http_flv_module \ 
--with-http_stub_status_module \ 
--with-http_gzip_static_module \ 
--http-client-body-temp-path=/var/tmp/nginx/client/\ 
--http-proxy-temp-path=/var/tmp/nginx/proxy/\ 
--http-fastcgi-temp-path=/var/tmp/nginx/fcgi/\ 
--http-uwsgi-temp-path=/var/tmp/nginx/uwsgi\ 
--http-scgi-temp-path=/var/tmp/nginx/scgi\ 
--with-pcre


提示：在两台服务器上都要安装Nginx
3、提供Nginx服务启动脚本


[root@node1 nginx-1.4.2]# vim /etc/rc.d/init.d/nginx 
#!/bin/sh 
# 
# nginx - this script starts and stops the nginx daemon 
# 
# chkconfig:  - 85 15 
# description:  Nginx is an HTTP(S) server, HTTP(S) reverse \ 
#              proxy and IMAP/POP3 proxy server 
# processname: nginx 
# config:      /etc/nginx/nginx.conf 
# config:      /etc/sysconfig/nginx 
# pidfile:    /var/run/nginx.pid 
# Source function library. 
. /etc/rc.d/init.d/functions
# Source networking configuration. 
. /etc/sysconfig/network
# Check that networking is up. 
[ "$NETWORKING"= "no"] && exit0 
nginx="/usr/sbin/nginx"
prog=$(basename$nginx) 
NGINX_CONF_FILE="/etc/nginx/nginx.conf"
[ -f /etc/sysconfig/nginx] && . /etc/sysconfig/nginx
lockfile=/var/lock/subsys/nginx
make_dirs() { 
# make required directories 
user=`nginx -V 2>&1 | grep"configure arguments:"| sed's/[^*]*--user=\([^ ]*\).*/\1/g'-` 
options=`$nginx -V 2>&1 | grep'configure arguments:'` 
foropt in$options; do
if[ `echo$opt | grep'.*-temp-path'` ]; then
value=`echo$opt | cut-d "="-f 2` 
if[ ! -d "$value"]; then
# echo "creating" $value 
mkdir-p $value && chown-R $user $value 
fi
fi
done
} 
start() { 
[ -x $nginx ] || exit5 
[ -f $NGINX_CONF_FILE ] || exit6 
make_dirs 
echo-n $"Starting $prog: "
daemon $nginx -c $NGINX_CONF_FILE 
retval=$? 
echo
[ $retval -eq0 ] && touch$lockfile 
return$retval 
} 
stop() { 
echo-n $"Stopping $prog: "
killproc $prog -QUIT 
retval=$? 
echo
[ $retval -eq0 ] && rm-f $lockfile 
return$retval 
} 
restart() { 
configtest || return$? 
stop 
sleep1 
start 
} 
reload() { 
configtest || return$? 
echo-n $"Reloading $prog: "
killproc $nginx -HUP 
RETVAL=$? 
echo
} 
force_reload() { 
restart 
} 
configtest() { 
$nginx -t -c $NGINX_CONF_FILE 
} 
rh_status() { 
status $prog 
} 
rh_status_q() { 
rh_status >/dev/null2>&1 
} 
case"$1"in
start) 
rh_status_q && exit0 
$1 
;; 
stop) 
rh_status_q || exit0 
$1 
;; 
restart|configtest) 
$1 
;; 
reload) 
rh_status_q || exit7 
$1 
;; 
force-reload) 
force_reload 
;; 
status) 
rh_status 
;; 
condrestart|try-restart) 
rh_status_q || exit0 
;; 
*) 
echo$"Usage: $0 {start|stop|status|restart|condrestart|try-restart|reload|force-reload|configtest}"
exit2 
esac
[root@node1 nginx-1.4.2]# chmod +x /etc/rc.d/init.d/nginx 
[root@node1 nginx-1.4.2]# chkconfig --add nginx 
[root@node1 nginx-1.4.2]# chkconfig nginx on 
[root@node1 nginx-1.4.2]# service nginx start 
Starting nginx:                                            [  OK  ]

提示：服务脚本在两台Nginx服务器上都要提供

三、实现高可用


1、修改配置keepalived
MASTER:172.16.3.3
[root@node1 ~]# cd /etc/keepalived 
[root@node1 keepalived]# mv keepalived.conf keepalived.conf.bak    # 备份keepalived配置文件 
[root@node1 keepalived]#vim keepalived.conf                    # 创建配置文件，如下 
! Configuration File for keepalived 
global_defs { 
  notification_email { 
    root@localhost 
  } 
  notification_email_from kaadmin@localhost 
  smtp_server 127.0.0.1 
  smtp_connect_timeout 30 
  router_id LVS_DEVEL 
} 
vrrp_script chk_nginx { 
    script "killall -0 nginx"
    interval 1 
    weight 2 
} 
vrrp_instance VI_10 { 
    state MASTER 
    interface eth0 
    virtual_router_id 131 
    priority 100 
    advert_int 1 
    authentication { 
        auth_type PASS 
        auth_pass 123456 
    } 
    virtual_ipaddress { 
    172.16.3.100 
    } 
    track_script { 
        chk_nginx 
  } 
  notify_master "/etc/keepalived/notify.sh master"
  notify_backup "/etc/keepalived/notify.sh backup"
  notify_fault "/etc/keepalived/notify.sh fault"
}


BACKUP:172.16.3.4


[root@node2 ~]# cd /etc/keeplived 
[root@node2 keepalived]# mv keepalived.conf keepalived.conf.bak 
[root@node2 keepalived]# vim keepalived.conf 
! Configuration File for keepalived 
global_defs { 
  notification_email { 
    root@localhost 
  } 
  notification_email_from kaadmin@localhost 
  smtp_server 127.0.0.1 
  smtp_connect_timeout 30 
  router_id LVS_DEVEL 
} 
vrrp_script chk_nginx { 
  script "killall -0 nginx"
  interval 1 
  weight 2 
} 
vrrp_instance VI_10 { 
    state BACKUP 
    interface eth0 
    virtual_router_id 131 
    priority 99 
    advert_int 1 
    authentication { 
        auth_type PASS 
        auth_pass 123456 
    } 
    virtual_ipaddress { 
    172.16.3.100 
    } 
    track_script { 
        chk_nginx 
  } 
  notify_master "/etc/keepalived/notify.sh master"
  notify_backup "/etc/keepalived/notify.sh backup"
  notify_fault "/etc/keepalived/notify.sh fault"
}


2、服务监控脚本


[root@node1 ~]# vim /etc/keepalived/notify.sh 
#!/bin/bash 
# 
vip=172.16.3.100 
contact='root@localhost'
notify() { 
    mailsubject="`hostname` to be $1: $vip floating"
    mailbody="`date '+%F %H:%M:%S'`: vrrp transition,`hostname` changed to be $1"
    echo $mailbody | mail -s "$mailsubject" $contact 
} 
case "$1" in
  master) 
    notify master 
    /etc/rc.d/init.d/nginx start 
    exit 0 
  ;; 
  backup) 
    notify backup 
    /etc/rc.d/init.d/nginx restart 
    exit 0 
  ;; 
  fault) 
    notify fualt 
    exit 0 
  ;; 
  *) 
    echo 'Usage: `basename $0` {master|backup|fault}'
    exit 1 
  ;; 
esac


复制脚本到另一节点


[root@node1 ~]# scp -p /etc/keepalived/notify.sh root@172.16.3.4:/etc/keepalived/


3、验证


[root@node1 ~]# ip addr show 
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00 
    inet 127.0.0.1/8 scope host lo 
    inet6 ::1/128 scope host 
      valid_lft forever preferred_lft forever 
2:  eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UNKNOWN qlen 1000 
    link/ether 00:0c:29:65:a0:2f brd ff:ff:ff:ff:ff:ff 
    inet 172.16.3.3/16 brd 172.16.255.255 scope global eth0 
    inet 172.16.3.100/32 scope global eth0          # Vip此时在Keepalived+Nginx1上 
    inet6 fe80::20c:29ff:fe65:a02f/64 scope link 
      valid_lft forever preferred_lft forever


然后关闭Keepalived+Nginx1上的keepalived服务Vip会跳转到Keepalived上

四、实现负载均衡
1、修改Keepalived配置文件
Keepalived+Nginx1：
[root@node1 ~]# cd /etc/keepalived 
[root@node1 keepalived]# mv keepalived.conf keepalived.conf.bak    # 备份keepalived配置文件 
[root@node1 keepalived]#vim keepalived.conf                        # 创建配置文件，如下 
! Configuration File for keepalived 
global_defs { 
  notification_email { 
    root@localhost 
  } 
  notification_email_from kaadmin@localhost 
  smtp_server 127.0.0.1 
  smtp_connect_timeout 30 
  router_id LVS_DEVEL 
} 
vrrp_script chk_nginx { 
    script "killall -0 nginx"
    interval 1 
    weight 2 
} 
vrrp_instance VI_10 { 
    state MASTER 
    interface eth0 
    virtual_router_id 131 
    priority 100 
    advert_int 1 
    authentication { 
        auth_type PASS 
        auth_pass 123456 
    } 
    virtual_ipaddress { 
    172.16.3.100 
    } 
    track_script { 
        chk_nginx 
  } 
  notify_master "/etc/keepalived/notify.sh master"
  notify_backup "/etc/keepalived/notify.sh backup"
  notify_fault "/etc/keepalived/notify.sh fault"
} 
vrrp_instance VI_20 { 
    state BACKUP 
    interface eth0 
    virtual_router_id 132 
    priority 99 
    advert_int 1 
    authentication { 
        auth_type PASS 
        auth_pass 123456 
    } 
    virtual_ipaddress { 
    172.16.3.200 
    } 
    track_script { 
        chk_nginx 
  } 
  notify_master "/etc/keepalived/notify1.sh master"
  notify_backup "/etc/keepalived/notify1.sh backup"
  notify_fault "/etc/keepalived/notify1.sh fault"
        auth_pass 123456 
 }


Keepalived+Nginx2
[root@node2 ~]# cd /etc/keeplived 
[root@node2 keepalived]# mv keepalived.conf keepalived.conf.bak 
[root@node2 keepalived]# vim keepalived.conf 
! Configuration File for keepalived 
global_defs { 
  notification_email { 
    root@localhost 
  } 
  notification_email_from kaadmin@localhost 
  smtp_server 127.0.0.1 
  smtp_connect_timeout 30 
  router_id LVS_DEVEL 
} 
vrrp_script chk_nginx { 
  script "killall -0 nginx"
  interval 1 
  weight 2 
} 
vrrp_instance VI_10 { 
    state BACKUP 
    interface eth0 
    virtual_router_id 131 
    priority 99 
    advert_int 1 
    authentication { 
        auth_type PASS 
        auth_pass 123456 
    } 
    virtual_ipaddress { 
    172.16.3.100 
    } 
    track_script { 
        chk_nginx 
  } 
  notify_master "/etc/keepalived/notify.sh master"
  notify_backup "/etc/keepalived/notify.sh backup"
  notify_fault "/etc/keepalived/notify.sh fault"
} 
vrrp_instance VI_20 { 
    state MASTER 
    interface eth0 
    virtual_router_id 132 
    priority 100 
    advert_int 1 
    authentication { 
        auth_type PASS 
        auth_pass 123456 
    } 
    virtual_ipaddress { 
    172.16.3.200 
    } 
    track_script { 
        chk_nginx 
  } 
  notify_master "/etc/keepalived/notify1.sh master"
  notify_backup "/etc/keepalived/notify1.sh backup"
  notify_fault "/etc/keepalived/notify1.sh fault"
}


提示：notify1.sh脚本与notify.sh只修改了vip
2、重启Keepalived服务
[root@node1 ~]# service keepalived restart 
[root@node2 ~]# service keepalived restart


3、验证


[root@node2 ~]# ip addr show 
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00 
    inet 127.0.0.1/8 scope host lo 
    inet6 ::1/128 scope host 
      valid_lft forever preferred_lft forever 
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UNKNOWN qlen 1000 
    link/ether 00:0c:29:52:ee:44 brd ff:ff:ff:ff:ff:ff 
    inet 172.16.3.4/16 brd 172.16.255.255 scope global eth0 
    inet 172.16.3.200/32 scope global eth0    #此时vip2在Keepalived+Nginx2上 
    inet6 fe80::20c:29ff:fe52:ee44/64 scope link 
      valid_lft forever preferred_lft forever


4、关闭Keepalived+Nginx2上的Keepalived服务模拟故障，vip2会转移到Keepalived+Nginx1上，反之依然


[root@node1 ~]# ip addr show 
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00 
    inet 127.0.0.1/8 scope host lo 
    inet6 ::1/128 scope host 
      valid_lft forever preferred_lft forever 
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UNKNOWN qlen 1000 
    link/ether 00:0c:29:65:a0:2f brd ff:ff:ff:ff:ff:ff 
    inet 172.16.3.3/16 brd 172.16.255.255 scope global eth0 
    inet 172.16.3.100/32 scope global eth0 
    inet 172.16.3.200/32 scope global eth0 
    inet6 fe80::20c:29ff:fe65:a02f/64 scope link 
      valid_lft forever preferred_lft forever


至此，此博文结束，欢迎各位博友多提宝贵意见！

天府云创
关注
专栏目录
Linux运维之（十一）负载均衡实现双节点HTTPS WEB集群
qq_39682037的博客
03-26 2296
负载均衡实现双节点HTTPS WEB集群 操作步骤 [root@google ~]# yum –y install pcre pcre-devel zlib zlib-devel openssl openssl-devel [root@google ~]# yum –y install gcc-c++ #下载相关服务 [root@google ~]# cd /home/gohb/Desktop...
LVS + Keepalived + Nginx 实现高可用
panthsoni的博客
12-02 1951
LVS + Keepalived + Nginx 搭建高可用web服务体系
nginx+keepalived高可用及双主模式
张井天的博客
12-26 240
原文地址： https://blog.csdn.net/lexang1/article/details/52386909
nginx+keepalived搭建高可用负载均衡(双主模式)
这个名字想了很久
06-18 5535
原文地址，转载请注明出处：http://blog.csdn.net/qq_34021712/article/details/73438100    ©王赛超 前言 上一篇博客已经实现了nginx+keepalived主从配置，这篇博客来实现双主配置，如果Nginx只有单台的话就会出现单点问题，那么整个网站就会挂掉，所以要实现Nginx的高可用，一台挂掉还会有另一台顶上去，从而保证网站可
24-Nginx高可用(基于Keepalived实现双主热备)
彼岸舞的博客
09-06 274
双机主备存在的问题 但是使用这样的一个双机主备是存在一些问题的, 就是需要采购两台云服务器, 价格比较贵, 如果主节点从来不发生故障的话, 所有的流量其实一致都是在主节点上的, 备用机,永远都用不上. 存在资源浪费的情况 为了解决双机主备存在的问题, 推出了双主热备 双主热备 虚拟出两个虚拟IP, 两台Nginx互相为主备关系, 达成双主热备的架构 我是用的依旧是 主: 192.168....
22-Nginx高可用(基于Keepalived实现双机主备)
彼岸舞的博客
09-06 314
双机主备 HA其实就是高可用, 现在部署的其实就是一台Nginx, 但凡是单节点, 都会存在宕机的可能性, 所以我们需要一个备用机, 来完成高可用, 解决单点故障问题 Keepalived概念 解决单点故障 组件免费 可以实现高可用HA机制 基于VRRP协议 虚拟理由冗余协议(VRRP) Virtual Router Redundancy Protocol 解决内网单机故障的路由协议 ...
Keepalived+Nginx实现高可用Web负载均衡
06-16
### Keepalived+Nginx 实现高可用Web负载均衡 #### 场景需求 在现代互联网应用中，网站和应用程序需要处理大量的用户请求，并确保即使在服务器出现故障的情况下也能持续提供服务。为了满足这一需求，通常采用高可用...
分布式架构高可用架构-Keepalived+Nginx实现高可用Web负载均衡.pdf
最新发布
07-08
### 分布式架构高可用架构-Keepalived+Nginx实现高可用Web负载均衡 #### 一、场景需求 在互联网应用中，随着用户数量的增长和技术的发展，单一服务器已难以满足日益增长的服务需求。分布式系统架构应运而生于解决...
lvs+keepalived+nginx+tomcat实现高性能负载均衡集群.rar
03-20
这个文档"lvs+keepalived+nginx+tomcat实现高性能负载均衡集群.docx"将详细解释每个组件的配置细节、集群的架构图以及可能出现的问题及解决方案，帮助你更好地理解和实施这个高性能的负载均衡集群。
Haproxy+Keepalived+Nginx+Lamp+Nfs实现高可用集群1
08-08
【标题】：“Haproxy+Keepalived+Nginx+Lamp+Nfs实现高可用集群1” 【描述】：“在互联网服务中，高可用性是关键。本案例将通过Haproxy、Keepalived、Nginx、LAMP（Linux、Apache、MySQL、PHP）和NFS（网络文件系统...
KeepAlived 双节点 HA高可用 主备群集
09-05
KeepAlived 双节点 HA高可用 主备群集.KeepAlived 双节点 HA高可用 主备群集.KeepAlived 双节点 HA高可用 主备群集。
nginx+keepalived高可用web负载均衡
weixin_30794851的博客
03-07 109
一：安装环境 准备2台虚拟机，都安装好环境 centos 7keepalived:vip： 192.168.1.112192.168.1.110 nginxip 192.168.1.109 master nginx:88ip 192.168.1.110 backup nginx:88 二：下载nginx keepalived wget http://nginx.org/downlo...
双节点(nginx+keepalived)为两台apache服务器提供负载均衡
07-01 418
说明：本实验为双节点nginx为两台apache服务器提供负载均衡，本文不是做lvs，所以realserver不是配置在keepalived.conf而是在nginx的配置文件中upstream。此架构需考虑的问题：1）Master没挂，则Master占有vip且nginx运行在Master上2）Master挂了，则backup抢占vip且在backup上运行nginx服务3）如果mas...
轻松搭建 LNMP环境+DVWA 双节点web集群 负载均衡
sinat_35855737的博客
03-21 1397
本文超级详细地记录了用nginx负载均衡功能建立双节点WEB集群，安装DVWA，验证负载结果的过程。跟我做一定能成功。
Keepalived + Nginx双主架构
lqcbj的博客
01-22 1526
Keepalived + Nginx双主架构
记一次我的技术分享-nginx的使用及案例分析
成锰的博客
03-05 432
先给大家分享一套非常有用的nginx学习视频，共100集，每集几分钟讲清一个知识点，非常nice。大家扫码关注一下公众号 智程科技 ，回复 “nginx100” 即可免费领取哦 好了，言归正传。我现在的公司有一个非常优良的传统，那就是每个员工都会定期地分享技术干货，互相拓宽大家的知识维度。一般是以讲解加问答的形式，内容可以是一种新技术、一次性能调优的过程、甚至是一段优美的代码，内容不限制，时间一小时。其实，我第一次的技术分享是在19年5月份，但由于本人比较懒，一直没记录...
nginx负载均衡配置
weixin_67226763的博客
05-22 783
1、实现效果 （1）浏览器地址栏输入http://192.168.116.11/tonglaoban/test.html，观察负载均衡的实现效果，请求按照2:1分担到两个节点192.168.202.131和192.168.202.132的8080端口。 2、准备工作 （1）准备两台tomcat服务器。 （2）在两台tomcat里面webapps目录中，创建名称是tonglaoban的文件夹，在该文件夹中创建test.html页面，为了测试效果明显，建议填写所在服务器的
华为公有云上的Keepalived+NGINX高可用负载均衡实践
3. **Keepalived**：Keepalived是LVS项目的一部分，主要用于实现VRRP协议（Virtual Router Redundancy Protocol），在主服务器故障时，自动将VIP转移到备份服务器，保持服务的高可用性。 在部署过程中遇到的问题...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值