1.centOS7 安装nginx
借鉴:https://blog.csdn.net/u012486840/article/details/52610320
1.添加nginx yum 源
sudo rpm -Uvh http://nginx.org/packages/centos/7/noarch/RPMS/nginx-release-centos-7-0.el7.ngx.noarch.rpm
2.执行安装命令
sudo yum install -y nginx
3.开启系统默认启动
systemctl enable nginx.service
4.启动服务
service nginx start
2.keepalived安装
keepalived是一个开源,git地址:https://github.com/twitter/twemproxy/
1.安装keepalived
yum install keepalived
2.验证安装
keepalived -v Keepalived v1.3.5 (03/19,2017), git commit v1.3.5-6-g6fa32f2 Copyright(C) 2001-2017 Alexandre Cassen, <acassen@gmail.com>
3.配置高可用
借鉴:https://blog.csdn.net/u012453843/article/details/69668663
keepalived+nginx,实际只有一台服务器在工作,当主服务器挂掉了,重服务器启动充当主服务器:图片借用http://seanlook.com/2015/05/18/nginx-keepalived-ha/
1.在/etc/keepalived/ 下创建check_nginx.sh,该文件用来检测nginx 是是否正常运行,如果nginx异常就关闭keepalived,这个脚本文件可以根据自己的需求调整,同时需要给该文件可执行权限:chmod +x check_nginx.sh
#!/bin/bash A=`ps -C nginx --no-header |wc -l` if [ $A -eq 0 ];then nginx sleep 2 if [ `ps -C nginx --no-header |wc -l` -eq 0 ];then killall keepalived fi fi
2.keepalived配置
这里只是一个简单配置,详细配置查看githup文档
! Configuration File for keepalived global_defs { router_id nginx1 } vrrp_script check_nginx {//执行上边边界的脚本文件,用于检测nginx是否正常运行 script "/etc/keepalived/check_nginx.sh"//脚本文件位置 weight -20 interval 3//执行脚本的时间间隔,单位秒,这里需要注意的是,该时间要比下边配置的advert_int大,否则在运行过程中会报错:/etc/keepalived/check_nginx.sh exited due to signal 15 } vrrp_instance VI_1 { state MASTER//表示该机器为主,如果设置为BACKUP,表示该服务器为从服务器 interface eth0//使用网卡,可以是if add 或者ifconfig查看 virtual_router_id 51//集群唯一标示,同一个集群必须使用相同的id priority 100//刚才说state MASTER为主,其实并不是,它只是一个表示,实际是根据priority来判断谁是主服务器,该值越大,权限越高,越容易被选为主服务器 mcast_src_ip 10.220.109.202//网卡实际ip advert_int 1//检测时间间隔 authentication {// auth_type PASS auth_pass 1111 } track_script {//执行检测脚本 check_nginx } virtual_ipaddress {//虚拟ip,用于访问访问 10.220.109.222 } }
配置说明:解决http://seanlook.com/2015/05/18/nginx-keepalived-ha/
global_defs
notification_email
: keepalived在发生诸如切换操作时需要发送email通知地址,后面的 smtp_server 相比也都知道是邮件服务器地址。也可以通过其它方式报警,毕竟邮件不是实时通知的。router_id
: 机器标识,通常可设为hostname。故障发生时,邮件通知会用到vrrp_instance
state
: 指定instance(Initial)的初始状态,就是说在配置好后,这台服务器的初始状态就是这里指定的,但这里指定的不算,还是得要通过竞选通过优先级来确定。如果这里设置为MASTER,但如若他的优先级不及另外一台,那么这台在发送通告时,会发送自己的优先级,另外一台发现优先级不如自己的高,那么他会就回抢占为MASTERinterface
: 实例绑定的网卡,因为在配置虚拟IP的时候必须是在已有的网卡上添加的mcast_src_ip
: 发送多播数据包时的源IP地址,这里注意了,这里实际上就是在那个地址上发送VRRP通告,这个非常重要,一定要选择稳定的网卡端口来发送,这里相当于heartbeat的心跳端口,如果没有设置那么就用默认的绑定的网卡的IP,也就是interface指定的IP地址virtual_router_id
: 这里设置VRID,这里非常重要,相同的VRID为一个组,他将决定多播的MAC地址priority
: 设置本节点的优先级,优先级高的为masteradvert_int
: 检查间隔,默认为1秒。这就是VRRP的定时器,MASTER每隔这样一个时间间隔,就会发送一个advertisement报文以通知组内其他路由器自己工作正常authentication
: 定义认证方式和密码,主从必须一样virtual_ipaddress
: 这里设置的就是VIP,也就是虚拟IP地址,他随着state的变化而增加删除,当state为master的时候就添加,当state为backup的时候删除,这里主要是有优先级来决定的,和state设置的值没有多大关系,这里可以设置多个IP地址track_script
: 引用VRRP脚本,即在 vrrp_script 部分指定的名字。定期运行它们来改变优先级,并最终引发主备切换。vrrp_script
告诉 keepalived 在什么情况下切换,所以尤为重要。可以有多个 vrrp_script
script
: 自己写的检测脚本。也可以是一行命令如killall -0 nginx
interval 2
: 每2s检测一次weight -5
: 检测失败(脚本返回非0)则优先级 -5fall 2
: 检测连续 2 次失败才算确定是真失败。会用weight减少优先级(1-255之间)rise 1
: 检测 1 次成功就算成功。但不修改优先级这里要提示一下script一般有2种写法:
- 通过脚本执行的返回结果,改变优先级,keepalived继续发送通告消息,backup比较优先级再决定
- 脚本里面检测到异常,直接关闭keepalived进程,backup机器接收不到advertisement会抢占IP
上文 vrrp_script 配置部分,
killall -0 nginx
属于第1种情况,/etc/keepalived/check_nginx.sh
属于第2种情况(脚本中关闭keepalived)。个人更倾向于通过shell脚本判断,但有异常时exit 1,正常退出exit 0,然后keepalived根据动态调整的 vrrp_instance 优先级选举决定是否抢占VIP:
- 如果脚本执行结果为0,并且weight配置的值大于0,则优先级相应的增加
- 如果脚本执行结果非0,并且weight配置的值小于0,则优先级相应的减少
其他情况,原本配置的优先级不变,即配置文件中priority对应的值。
提示:
- 优先级不会不断的提高或者降低
- 可以编写多个检测脚本并为每个检测脚本设置不同的weight(在配置中列出就行)
- 不管提高优先级还是降低优先级,最终优先级的范围是在[1,254],不会出现优先级小于等于0或者优先级大于等于255的情况
- 在MASTER节点的 vrrp_instance 中 配置
nopreempt
,当它异常恢复后,即使它 prio 更高也不会抢占,这样可以避免正常情况下做无谓的切换以上配置在重服务器中也需要配置一份,但是keepalived.conf中有几个地方需要调整
! Configuration File for keepalived global_defs { router_id nginx1 } vrrp_script check_nginx {//执行上边边界的脚本文件,用于检测nginx是否正常运行 script "/etc/keepalived/check_nginx.sh"//脚本文件位置 weight -20 interval 3//执行脚本的时间间隔,单位秒,这里需要注意的是,该时间要比下边配置的advert_int大,否则在运行过程中会报错:/etc/keepalived/check_nginx.sh exited due to signal 15 } vrrp_instance VI_1 { state BACKUP interface eth0//使用网卡,可以是if add 或者ifconfig查看 virtual_router_id 51//集群唯一标示,同一个集群必须使用相同的id priority 99//刚才说state MASTER为主,其实并不是,它只是一个表示,实际是根据priority来判断谁是主服务器,该值越大,权限越高,越容易被选为主服务器 mcast_src_ip 10.220.109.237//网卡实际ip advert_int 1//检测时间间隔 authentication {// auth_type PASS auth_pass 1111 } track_script {//执行检测脚本 check_nginx } virtual_ipaddress {//虚拟ip,用于访问访问 10.220.109.222 } }
在check_nginx.sh中使用到killall 命令,但是在实际执行过冲可能找不到该命令, 安装psmisc
yum install psmisc
引用:
https://blog.csdn.net/u012453843/article/details/69668663
http://seanlook.com/2015/05/18/nginx-keepalived-ha/