lvs（nat、dr、keekalived、双机热备、rsync远程同步）

一、lvs-nat模式的实现
1、实验前环境准备
三台服务器，一台作为director，两台作为real server，director有一个外网网卡和一个内网ip，两个real server，并且需要把两个real server的内网网关设置为director的内网IP
2、两个real server上都安装tomcat服务
3、在director上添加一个网卡（使用桥接模式）

4、查看uuid和mac地址
[root@x4d000007 /]# uuidgen ens37
8b9f10b7-c9e6-479e-92e4-5a1e96c39f3b
[root@x4d000007 /]# cat /sys/class/net/ens37/address
00:0c:29:4e:7e:c3
5、修改配置文件
[root@x4d000007 network-scripts]# cp ifcfg-ens33 ifcfg-ens37
[root@x4d000007 network-scripts]# vi ifcfg-ens37

6、重启网卡
[root@x4d000007 network-scripts]# systemctl restart network
7、安装上httpd
[root@x4d000007 /]# yum install httpd -y
8、director上安装ipvsadm
[root@x4d000007 /]# yum install -y ipvsadm
9、编辑nat脚本
[root@x4d000007 /]# vi /usr/local/sbin/lvs_nat.sh
#! /bin/bash

director服务器上开启路由转发功能:

echo 1 > /proc/sys/net/ipv4/ip_forward

关闭 icmp 的重定向

echo 0 > /proc/sys/net/ipv4/conf/all/send_redirects
echo 0 > /proc/sys/net/ipv4/conf/default/send_redirects
echo 0 > /proc/sys/net/ipv4/conf/ens33/send_redirects
echo 0 > /proc/sys/net/ipv4/conf/ens37/send_redirects

director设置 nat 防火墙

iptables -t nat -F
iptables -t nat -X
iptables -t nat -A POSTROUTING -s 77.0.0.0/24 -j MASQUERADE
#director设置 ipvsadm
IPVSADM=’/sbin/ipvsadm’
$IPVSADM -C
$IPVSADM -A -t 192.168.100.48:80 -s wrr
$IPVSADM -a -t 192.168.100.48:80 -r 77.0.0.5:8080 -m -w 1
$IPVSADM -a -t 192.168.100.48:80 -r 77.0.0.6:8080 -m -w 1
10、授权并执行
[root@x4d000007 /]# cd /usr/local/sbin/
[root@x4d000007 sbin]# chmod a+x lvs_nat.sh
[root@x4d000007 sbin]# ./lvs_nat.sh
11、查看ipvsadm配置规则并保存
[root@x4d000007 sbin]# ipvsadm -ln
[root@x4d000007 sbin]# ipvsadm --save > /etc/sysconfig/ipvsadm
12、进入查看
[root@x4d000007 sbin]# vi /etc/sysconfig/ipvsadm
13、重启服务并设置开机自启
[root@x4d000007 sbin]# systemctl restart ipvsadm.service
[root@x4d000007 /]# systemctl restart httpd
[root@x4d000007 /]# systemctl enable httpd
14、进入到两台real server中，分别配置（设置网关的 IP 为 director 的内网 IP）
[root@localhost /]# echo web1 >/usr/local/tomcat7.0/webapps/apps/index.html
[root@localhost /]# vi /etc/sysconfig/network-scripts/ifcfg-ens33
[root@localhost /]# systemctl restart network

[root@x4d000006 apps]# echo web2 >/usr/local/tomcat7.0/webapps/apps/index.html
[root@x4d000006 apps]# vi /etc/sysconfig/network-scripts/ifcfg-ens33
[root@x4d000006 apps]# systemctl restart network
15、测试成功（有些浏览器可能会保存cookie值会轮询失败，换个浏览器就行）

二、DR模式
一定要关闭selinux
[root@x4d000005 network-scripts]# getenforce
Enforcing
[root@x4d000005 network-scripts]# setenforce 0
1、修改网卡配置文件并重启
[root@x4d000007 network-scripts]# cp ifcfg-ens33 ifcfg-ens33:0
[root@x4d000007 network-scripts]# vi ifcfg-ens33:0
[root@x4d000007 network-scripts]# ifup ifcfg-ens33:0

2、director上安装ipvsadm
[root@x4d000007 /]# yum install -y ipvsadm
3、配置路由
[root@x4d000007 ~]# route add -host 77.0.0.77 dev ens33:0
4、配置负载均衡
[root@x4d000007 network-scripts]# echo 1 > /proc/sys/net/ipv4/ip_forward
[root@x4d000007 network-scripts]# ipvsadm -At 77.0.0.77:80 -s wrr
[root@x4d000007 network-scripts]# ipvsadm -at 77.0.0.77:80 -r 77.0.0.5:8080 -g -w 5
[root@x4d000007 network-scripts]# ipvsadm -at 77.0.0.77:80 -r 77.0.0.6:8080 -g -w 1
5、保存
[root@x4d000007 network-scripts]# ipvsadm --save > /etc/sysconfig/ipvsadm
6、查看规则
[root@x4d000007 network-scripts]# ipvsadm -ln

7、重启ipvsadm
[root@x4d000007 network-scripts]# systemctl restart ipvsadm
8、在两台server上配置虚拟网卡（两台配置相同）
[root@x4d000005 network-scripts]# cp ifcfg-lo ifcfg-lo:0
[root@x4d000005 network-scripts]# vi ifcfg-lo:0
[root@x4d000005 network-scripts]# ifup ifcfg-lo:0

9、添加路由
[root@x4d000005 network-scripts]# route add -host 77.0.0.77 dev lo:0
10、重定向
[root@x4d000005 network-scripts]# echo “1” > /proc/sys/net/ipv4/conf/lo/arp_ignore
[root@x4d000005 network-scripts]# echo “2” > /proc/sys/net/ipv4/conf/lo/arp_announce
[root@x4d000005 network-scripts]# echo “1” > /proc/sys/net/ipv4/conf/all/arp_ignore
[root@x4d000005 network-scripts]# echo “2” > /proc/sys/net/ipv4/conf/all/arp_announce
11、测试成功

三、Lvs-dr Keepalived（四台机子）
1、在两台director上安装keepalived和ipvsadm
[root@localhost /]# yum install ipvsadm keepalived -y
2、转发配置
[root@localhost /]# echo 1 > /proc/sys/net/ipv4/ip_forward
3、配置keepalived
[root@localhost /]# vi /etc/keepalived/keepalived.conf
! Configuration File for keepalived
global_defs {
notification_email {
acassen@firewall.loc
failover@firewall.loc
sysadmin@firewall.loc
}
notification_email_from Alexandre.Cassen@firewall.loc
smtp_server 192.168.200.1
smtp_connect_timeout 30
router_id LVS1 #lvs的名称
vrrp_skip_check_adv_addr

vrrp_strict #需注释，否则无法ping通

vrrp_garp_interval 0
vrrp_gna_interval 0
}
vrrp_instance VI_1 {
state MASTER #从主机使用BACKUP
interface ens33
virtual_router_id 51 //vrrp组名
priority 100 //优先级调整，从主机小于master
advert_int 1
authentication {
auth_type PASS
auth_pass 1111
}
virtual_ipaddress {
77.0.0.77 #虚拟ip
}
}
virtual_server 77.0.0.77 80 {
delay_loop 6
lb_algo wrr #轮询模式
lb_kind DR #LVS模式
persistence_timeout 0
protocol TCP

real_server 77.0.0.5 80 {
    weight 1
   TCP_CHECK {
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
    }
}

}
real_server 77.0.0.6 80 {
weight 1
TCP_CHECK {
connect_timeout 10
nb_get_retry 3
delay_before_retry 3
}
} }
注：启动keepalived必须先主后从
[root@localhost /]# systemctl restart keepalived
4、另外两台后端机子上配置虚拟网卡
[root@localhost network-scripts]# cp ifcfg-lo ifcfg-lo:0
[root@localhost network-scripts]# vi ifcfg-lo:0

[root@localhost network-scripts]# ifup ifcfg-lo:0
5、安装httpd
[root@x4d000005 /]# yum install -y httpd
[root@localhost /]# systemctl restart httpd
6、测试成功

四、双机热备（准备两台机子配置）
1、安装keepalived和ipvsadm
[root@x4d000005 /]# yum install ipvsadm keepalived -y
2、转发配置
[root@x4d000006 /]# echo 1 > /proc/sys/net/ipv4/ip_forward
3、配置虚拟网卡
[root@x4d000006 network-scripts]# cp ifcfg-lo ifcfg-lo:0
[root@x4d000006 network-scripts]# vi ifcfg-lo:0
[root@x4d000006 network-scripts]# ifup ifcfg-lo:0

4、编辑keepalived配置文件（可以不用配置虚拟网卡）
[root@x4d000005 /]# vi /etc/keepalived/keepalived.conf
! Configuration File for keepalived
global_defs {
notification_email {
acassen@firewall.loc
failover@firewall.loc
sysadmin@firewall.loc
}
notification_email_from Alexandre.Cassen@firewall.loc
smtp_server 192.168.200.1
smtp_connect_timeout 30
router_id LVS1 #lvs的名称
vrrp_skip_check_adv_addr

vrrp_strict #需注释，否则无法ping通

vrrp_garp_interval 0
vrrp_gna_interval 0
}
vrrp_instance VI_1 {
state MASTER #从主机使用BACKUP
interface ens33
virtual_router_id 51 //vrrp组名
priority 100 //优先级调整，从主机小于master
advert_int 1
authentication {
auth_type PASS
auth_pass 1111
}
virtual_ipaddress {
77.0.0.22 #虚拟ip
}
}
virtual_server 77.0.0.22 80 {
delay_loop 6
lb_algo wrr #轮询模式
lb_kind DR #LVS模式
persistence_timeout 0
protocol TCP

real_server 77.0.0.5 80 {
    weight 1
   TCP_CHECK {
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
    }
}

}
real_server 77.0.0.6 80 {
weight 1
TCP_CHECK {
connect_timeout 10
nb_get_retry 3
delay_before_retry 3
}
}
}
5、测试成功

五、rsync远程同步命令
1、原理
rsync是一个远程数据同步工具，可以通过LAN/WAN快速同步多台主机间的文件，rsync使用所谓的“rsync算法”来使本地和远程两个主机的文件达到同步，这个算法只传送两个文件的不同部分，而不是每次都整份传送，因此速度相当快。
2、功能
（1）作为命令，实现本地–远程文件同步
（2）作为服务，实现本地–远程文件同步
3、特点
可以镜像保存整个目录树和文件系统，可以保留原有的权限（permission,mode），owner，group，时间（修改时间，modify time），软硬链接，文件属性（attributes）信息等，传输效率高，使用同步算法，只比较变化的，支持匿名传输，方便网络镜像，也可以做验证，加强安全。
4、同类服务
（1）同步：刷新文件系统缓存，强制将修改过的数据块写入磁盘，并且更新超快
（2）异步：将数据先放到缓冲区，再周期性（一般是30s）的去同步到磁盘
（3）远程同步：remote synchronous
5、操作
本地同步：rsync -av /etc/passwd /tmp/1.txt
远程同步:：rsync -av /tmp/1.txt 192.168.36.131:/tmp/2.txt
[root@x4d000005 /]# ssh-keygen 必须设置目标地址免密登陆（一路回车）
[root@x4d000005 tmp]# ssh-copy-id -i ~/.ssh/id_rsa.pub root@77.0.0.6 远程拷贝到其他主机上
[root@x4d000005 tmp]# ssh root@77.0.0.6 远程登录到77.0.0.6主机上

rsync通过ssh方式同步
推送文件
方式1：rsync /etc/passwd 192.168.36.131:/tmp/cc.txt
方式2：rsync -av /etc/passwd 192.168.36.131:/tmp/cc.txt
拉取文件:
rsync -av /etc/passwd 192.168.36.131:/tmp/cc.txt
rsync -avP 192.168.36.131:/tmp/cc.txt /tmp/123.txt
指定端口：rsync -avp -e “ssh -p 22” /etc/passwd 192.168.36.131:/tmp/cc.txt
注：rsync通过服务的方式同步需要安装xinetd
6、例子
服务器配置：
（1）安装xinetd和rsync服务
[root@x4d000006 /]# yum install -y xinetd
[root@x4d000006 /]# yum -y install rsync
（2）修改配置文件
[root@x4d000006 /]# vi /etc/rsyncd.conf （前面为全局模块参数，后面wwwroot为共享模块参数）

uid = root
gid = root

use chroot = yes

max connections = 4

pid file = /var/run/rsyncd.pid

exclude = lost+found/

transfer logging = yes

timeout = 900

ignore nonreadable = yes

dont compress = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2

[ftp]

path = /home/ftp

comment = ftp export area

address = 77.0.0.5
port = 873
hosts allow = *
use chroot = yes
max connections = 5
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsync.log
motd file = /etc/rsyncd.motd
[wwwroot]
path = /var/www/html
comment = rsync wwwroot of www.baidu.com
read only = yes
list = yes
uid = root
gid = root
auth users = backuper
secrets file = /etc/rsync.passwd

（3）创建弹出信息
[root@localhost /]# echo "welcome to backup server " > /etc/rsyncd.motd
（4）创建密码文件
[root@localhost /]# vi /etc/rsync.passwd

（5）修改权限
[root@localhost /]# chmod 600 /etc/rsync.passwd
[root@localhost /]# chmod 777 /etc/rsyncd.conf
（6）重启并设置开机自启
[root@x4d000005 /]# vi /etc/xinetd.conf

[root@localhost /]# systemctl restart xinetd
[root@localhost /]# systemctl enable xinetd
[root@localhost /]# rsync --daemon
（7）安装httpd服务
[root@x4d000006 /]# yum install -y httpd
客户端配置：
（1）创建并编辑密码文件
[root@x4d000006 /]# vi /etc/rsyncpass.txt

（2）授权
[root@x4d000006 /]# chmod 600 /etc/rsyncpass.txt
（3）编写测试页面（内容随便写）
[root@x4d000006 tmp]# cd /opt
[root@x4d000006 opt]# vi index.html
（4）安装rsync
[root@x4d000006 opt]# yum install -y rsync
（5）拷贝成功
[root@x4d000006 opt]# rsync -avL backuper@77.0.0.5::wwwroot /tmp/ --password-file=/etc/rsyncpass.txt

多台服务器同步工作：（inotify）
在服务器端
（1）安装插件，拖入inotify软件包
[root@x4d000005 opt]# yum install -y lrzsz
（2）安装编译环境
[root@x4d000005 opt]# yum install -y gcc* cc*
（3）解压并进入目录编译
[root@x4d000005 opt]# tar xzf inotify-tools-3.13.tar.gz
[root@x4d000005 opt]# cd inotify-tools-3.13
[root@x4d000005 inotify-tools-3.13]# ./configure 预编译
[root@x4d000005 inotify-tools-3.13]# make -j 4 编译
[root@x4d000005 inotify-tools-3.13]# make install 安装
（4）查看帮助
[root@x4d000005 inotify-tools-3.13]# inotifywait -h
（5）监控指定目录
[root@x4d000005 inotify-tools-3.13]# inotifywait -mrq -e create,move,delete,modify,attrib /var/www/html/
进入/var/www/html目录创建aaa目录监控成功

（6）编写触发脚本（参考）
[root@x4d000005 opt]# vi a.sh
#!/bin/bash
echo aaa bbb ccc |while read a b c
do
echo $a
echo $b
echo $c
Done

#!/bin/bash
SRC="/var/www/html/"
DEST=“root@10.0.0.12:/var/www/html/”
inotifywait -mrq -e create,move,delete,modify,attrib $SRC |while read a b c
do
rsync -azP --delete $SRC $DEST
done
（7）授权执行
[root@x4d000005 opt]# chmod a+x a.sh
[root@x4d000005 opt]# ./a.sh
[root@x4d000005 opt]# nohup ./a.sh >output 2>&1 &
（8）在客户端编写测试页面
[root@x4d000006 html]# vi index.html

（9）安装http服务
[root@x4d000006 opt]# yum install -y httpd
[root@x4d000006 html]# systemctl restart httpd
（10）用客户端测试成功