keepalived+nginx实现高可用(一)

Keepalived 简要介绍

Keepalived 是一种高性能的服务器高可用或热备解决方案，Keepalived 可以用来防止服务器单点故障的发生，通过配合 Nginx 可以实现 web 前端服务的高可用。 

Keepalived 以 VRRP 协议为实现基础，用 VRRP 协议来实现高可用性(HA)。VRRP(Virtual Router Redundancy Protocol)协议是用于实现路由器冗余的协议，VRRP 协议将两台或多台路由器设备虚拟成一个设备，对外提供虚拟路由器 IP(一个或多个)，而在路由器组内部，如果实际拥有这个对外 IP 的路由器如果工作正常的话就是 MASTER，或者是通过算法选举产生，MASTER 实现针对虚拟路由器 IP 的各种网络功能，如 ARP 请求，ICMP，以及数据的转发等；其他设备不拥有该虚拟 IP，状态是 BACKUP，除了接收 MASTER 的
VRRP 状态通告信息外，不执行对外的网络功能。当主机失效时，BACKUP 将接管原先 MASTER 的网络功能。 

VRRP 协议使用多播数据来传输 VRRP 数据，VRRP 数据使用特殊的虚拟源 MAC 地址发送数据而不是自身网卡的 MAC 地址，VRRP 运行时只有 MASTER 路由器定时发送VRRP 通告信息，表示 MASTER 工作正常以及虚拟路由器 IP(组)，BACKUP 只接收 VRRP 数据，不发送数据，如果一定时间内没有接收到 MASTER 的通告信息，各 BACKUP 将宣告自己成为 MASTER，发送通告信息，重新进行 MASTER 选举状态。 

通俗的讲Keepalived的作用是检测服务器的状态，如果有一台web服务器宕机，或工作出现故障，Keepalived将检测到，并将有故障的服务器从系统中剔除，同时使用其他服务器代替该服务器的工作，当服务器工作正常后Keepalived自动将服务器加入到服务器群中，这些工作全部自动完成，不需要人工干涉，需要人工做的只是修复故障的服务器。

下载地址  http://www.keepalived.org/download.html

一。 安装方案

物理机或虚拟机一 ip：192.168.43.129主机名：zk-01端口：2688主从：master

物理机或虚拟机二 ip：192.168.43.130主机名：zk-02端口：2688 主从：slave

虚拟ip  ：  192.168.43.120

二。安装nginx

在  192.168.43.129 和 192.168.43.130 分别安装nginx ，请参考  CentOS7安装Nginx   http://blog.csdn.net/zsg88/article/details/76562280

三。 配置 nginx

 # vi /home/zsg/program/nginx/conf/nginx.conf

listen 2688; #端口改为2688

防火墙放开2688端口

# vi /etc/sysconfig/iptables 

## Nginx 
-A INPUT -m state --state NEW -m tcp -p tcp --dport 88 -j ACCEPT 

# service iptables restart 

四。修改 Nginx 欢迎首页内容（用于后面测试，用于区分两个节点的 Nginx） ： 
# vi /home/zsg/program/nginx/html/index.html 
192.168.43.129 中的标题加 1 
<h1>Welcome to nginx! one</h1> 
192.168.43.130 中的标题加 2 
<h1>Welcome to nginx! two</h1>

五。 测试 Nginx 是否安装成功 
# /home/zsg/program/nginx/sbin/nginx -t 

[zsg@zk-02 nginx]$ sbin/nginx -t
nginx: the configuration file /home/zsg/program/nginx/conf/nginx.conf syntax is ok
nginx: configuration file /home/zsg/program/nginx/conf/nginx.conf test is successful

六。访问

sbin/nginx   #启动

分别访问2个nginx

七。确认是否安装lvs

LVS是 Linux Virtual Server 的简称，也就是Linux虚拟服务器。这是一个由章文嵩博士发起的一个开源项目，它的官方网站是 http://www.linuxvirtualserver.org 现在 LVS 已经是 Linux 内核标准的一部分。使用 LVS 可以达到的技术目标是：通过 LVS 达到的负载均衡技术和 Linux 操作系统实现一个高性能高可用的 Linux 服务器集群，它具有良好的可靠性、可扩展性和可操作性。从而以低廉的成本实现最优的性能。LVS 是一个实现负载均衡集群的开源软件项目，LVS架构从逻辑上可分为调度层、Server集群层和共享存储。

Keepalived 需要依赖IPVS Framework

1.产看是否安装lvs

执行 ipvsadm 后

未安装 

ipvsadm -bash: ipvsadm: command not foun

已安装 

IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn

2. 安装lvs

# yum install -y ipvsadm

 

七。安装 Keepalived 

下载安装包

# cd /usr/local/src

# wget http://www.keepalived.org/software/keepalived-1.3.5.tar.gz

# tar -zxvf keepalived-1.3.5.tar.gz

# cd keepalived-1.3.5

# mkdir -p /usr/local/program/keepalived

# ./configure --prefix=/usr/local/program/keepalived

# make && make install

安装成功最后的提示

Keepalived configuration
------------------------
Keepalived version       : 1.3.5
Compiler                 : gcc
Preprocessor flags       : 
Compiler flags           : -Wall -Wunused -Wstrict-prototypes -Wextra -g -O2
Linker flags             : 
Extra Lib                :  -lcrypto  -lssl 
Use IPVS Framework       : Yes
IPVS use libnl           : No
IPVS syncd attributes    : No
IPVS 64 bit stats        : No
fwmark socket support    : Yes
Use VRRP Framework       : Yes
Use VRRP VMAC            : Yes
Use VRRP authentication  : Yes
With ip rules/routes     : Yes
SNMP vrrp support        : No
SNMP checker support     : No
SNMP RFCv2 support       : No
SNMP RFCv3 support       : No
DBUS support             : No
SHA1 support             : No
Use Debug flags          : No
Stacktrace support       : No
Memory alloc check       : No
libnl version            : None
Use IPv4 devconf         : No
Use libiptc              : No
Use libipset             : No
init type                : systemd
Build genhash            : Yes
Build documentation      : No

八。配置keepalived开机启动

(1)复制 keepalived 服务启动脚本到/etc/init.d/ 

# cp /usr/local/src/keepalived-1.3.5/keepalived/etc/init.d/keepalived  /etc/init.d/ 

(2) 因为我们使用非默认路径（/usr/local）安装的keepalived, 故需要修改几处路径，以保证keepalived能正常启动, 需要修改的文件如下

# vi /etc/init.d/keepalived

修改如下

# Source configuration file (we set KEEPALIVED_OPTIONS there)
#. /etc/sysconfig/keepalived
. /usr/local/program/keepalived/etc/sysconfig/keepalived     #注释掉上面那一句，修改成你自己正确的配置文件位置

(3)  配置环境变量（将keepavlied主程序所在路径导入到环境变量PATH中）

# vi /etc/profile

## keepavlied
KEEPALIVED_HOME=/usr/local/program/keepalived
PATH=$KEEPALIVED_HOME/sbin:$PATH
export PATH

让配置生效

# source /etc/profile 

(4) 建立可执行文件链接

# ln -s /usr/local/program/keepalived/sbin/keepalived  /usr/sbin/     

或者将/usr/local/program/keepalived/sbin/keepalived 拷贝到/usr/sbin/ 也可以

# cp /usr/local/program/keepalived/sbin/keepalived  /usr/sbin/ 

(5)修改/usr/local/program/keepalived/etc/sysconfig/keepalived文件，设置正确的服务启动参数 

KEEPALIVED_OPTIONS="-D -f /usr/local/program/keepalived/etc/keepalived/keepalived.conf"

(6)设置 keepalived 服务开机启动 

# chkconfig keepalived on 

(7) 修改pid文件路径

# vi /lib/systemd/system/keepalived.service

[Unit]
Description=LVS and VRRP High Availability Monitor
After=syslog.target network-online.target

[Service]
Type=forking
PIDFile=/var/run/keepalived.pid           #修改pid路径
KillMode=process
EnvironmentFile=-/usr/local/program/keepalived/etc/sysconfig/keepalived
ExecStart=/usr/local/program/keepalived/sbin/keepalived $KEEPALIVED_OPTIONS
ExecReload=/bin/kill -HUP $MAINPID

[Install]
WantedBy=multi-user.target

运行命令

# systemctl daemon-reload    #重新载入 systemd，扫描新的或有变动的单元

(8)  测试

# service keepalived start
Starting keepalived (via systemctl):                       [  OK  ]

注意：如果此时查看进程，并没有发现keepalived的进程。为什么呢，因为我们还没有配置keepalived.conf，所以keepalived启动后又退出了。

下一篇讲解Keepalived的配置