华子目录
LVS前言
集群与分布式
系统性能扩展
Scale UP：向上扩展，加硬件增强Scale Out：向外扩展，加设备增强，但是需要注意调度流量的分配问题，Cluster集群
集群cluster
Cluster:集群，是为了解决某个特定问题将服务器组合起来形成的单个系统
Cluster常见的三种类型：
-
LB：LoadBalancing（负载均衡）由多个主机组成，每个主机只承担一部分访问 -
HA：High Availiablity（高可用），SPOF（single Point Of failure）(解决单点主机失效)MTBF：Mean Time Between Failure平均无故障时间，正常时间MTTR：Mean Time To Restoration（repair）平均恢复前时间，也就是故障时间A=MTBF/（MTBF+MTTR）属于(0,1)：99%, 99.5%, 99.9%, 99.99%, 99.999%，A的值越高，服务器性能越好
-
HPC：High-performance computing（高性能计算，国家战略资源，不在课程范围内）
分布式
- 分布式
存储：Ceph，GlusterFs，FastDFS，MogileFs - 分布式
计算：hadoop，Spark
分布式常见应用
- 分布式
应用：服务按照功能拆分，使用微服务 - 分布式
静态资源：静态资源放在不同的存储集群上 - 分布式
数据和存储：使用key-value缓存系统 - 分布式
计算：对特殊业务使用分布式计算，比如Hadoop集群
集群与分布式的区别
- 集群：
同一个业务系统，部署在多台服务器上，集群中，每一台服务器实现的功能没有差别，数据和代码都是一样的 - 分布式：
一个业务被拆成多个子业务，或者本身就是不同的业务，部署在多台服务器上。分布式中，每一台服务器实现的功能是有差别的，数据和代码也是不一样的，分布式每台服务器功能加起来，才是完整的业务 - 分布式是以
缩短单个任务的执行时间来提升效率的，而集群则是通过提高单位时间内执行的任务数来提升效率 - 对于大型网站，访问用户很多，实现
一个群集，在前面部署一个负载均衡服务器，后面几台服务器完成同一业务。如果有用户进行相应业务访问时，负载均衡器根据后端哪台服务器的负载情况，决定由给哪一台去完成响应，并且后台服务器垮了，其它的服务器可以顶上来。分布式的每一个节点，都完成不同的业务，如果一个节点垮了，那这个业务可能就会失败。
LVS（Linux virtual server）
lvs简介
LVS：Linux Virtual Server，负载调度器，linux内核集成，由中国章文嵩创作，阿里的四层SLB(Server LoadBalance)是基于LVS+keepalived实现LVS官网: http://www.linuxvirtualserver.org/
lvs相关术语
VS：Virtual Server，负责调度的lvs服务器RS：RealServer，负责真正提供服务的服务器CIP：Client IP，客户端的ipVIP：Virtual serve IPlvs调度器外网的ipDIP：Director IPlvs调度器内网的ipRIP：Real server IP真正提供服务的服务器ip
流量访问流程
- 来时流量：
CIP --> VIP == DIP --> RIP - 回时流量：
CIP <-- VIP == DIP <-- RIP
lvs集群体系架构
工作原理
VS根据请求报文的目标IP和目标协议及端口将其调度转发至某RS上，VS会根据调度算法来挑选RS
lvs集群的类型
lvs-nat：修改请求报文的目标IP，多目标IP的DNATlvs-dr：操纵封装新的MAC地址lvs-tun：在原请求IP报文之外新加一个IP首部lvs-fullnat：修改请求报文的源和目标IP
lvs-nat
- 本质是
多目标IP的DNAT，通过将请求报文中的目标地址和目标端口修改为某挑出的RS的rip和port实现转发 rip和dip应在同一个IP网络（同一网段），且应使用私网地址RS的网关要指向dip请求报文和响应报文都必须经由Director转发，Director易于成为系统瓶颈- 支持
端口映射，可修改请求报文的目标port vs必须是Linux系统，RS可以是任意OS系统
nat模式数据逻辑
客户端发送访问请求，请求数据包中含有请求来源（cip），访问目标地址（VIP），访问目标端口（80port）VS服务器接收到访问请求做DNAT把请求数据包中的目的地址由VIP换成RS的RIP和相应端口9000RS1响应请求，发送响应数据包，包中的响应报文为数据来源（RIP1），响应目标（CIP），响应端口（9000port）VS服务器接收到响应数据包，改变包中的数据来源（RIP1-->VIP），响应目标端口（9000-->80）VS服务器把修改过报文的响应数据包回传给客户端
nat模式的弊端
lvs的NAT模式接收和返回客户端数据包时都要经过lvs的调度机，所以lvs的调度机容易阻塞
实验拓扑
实验主机准备
- 准备
3台主机，一台lvs，两台webserver（webserver1，Webserver2） lvs主机上两个网卡，一个nat，一个仅主机- 两个
webserver上一个仅主机网卡 rip的网关指向dip
lvs网卡设定
- 由于
lvs的nat模式和仅主机模式的网卡处于不同vlan，两个网卡要想通信，就必须打开Linux内核路由转发功能 webserver1网卡设定
webserver2和webserver1一样
实验步骤
1.lvs上的ip设置
vip：172.25.254.100dip：192.168.0.100
[root@lvs ~]# cat /etc/NetworkManager/system-connections/eth0.nmconnection
[connection]
id=eth0
type=ethernet
interface-name=eth0
[ethernet]
[ipv4]
address=172.25.254.100/24,172.25.254.2
dns=114.114.114.114
method=manual
[ipv6]
addr-gen-mode=default
method=auto
[proxy]
[root@lvs ~]# cat /etc/NetworkManager/system-connections/eth1.nmconnection
[connection]
id=eth1
type=ethernet
interface-name=eth1
[ethernet]
[ipv4]
address=192.168.0.100/24
method=manual
[ipv6]
addr-gen-mode=default
method=auto
[proxy]
[root@lvs ~]# nmcli connection reload
[root@lvs ~]# nmcli connection up eth0
[root@lvs ~]# nmcli connection up eth1
[root@lvs ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
link/ether 00:0c:29:35:a8:7c brd ff:ff:ff:ff:ff:ff
altname enp3s0
altname ens160
inet 172.25.254.100/24 brd 172.25.254.255 scope global noprefixroute eth0
valid_lft forever preferred_lft forever
inet6 fe80::aae4:10d1:b082:a3e8/64 scope link noprefixroute
valid_lft forever preferred_lft forever
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
link/ether 00:0c:29:35:a8:86 brd ff:ff:ff:ff:ff:ff
altname enp19s0
altname ens224
inet 192.168.0.100/24 brd 192.168.0.255 scope global noprefixroute eth1
valid_lft forever preferred_lft forever
inet6 fe80::d494:9f80:ebde:c2fe/64 scope link noprefixroute
valid_lft forever preferred_lft forever
2.lvs中开启路由转发功能
[root@lvs ~]# vim /etc/sysctl.conf
net.ipv4.ip_forward=1 #在末尾添加
[root@lvs ~]# sysctl -p #重新加载
net.ipv4.ip_forward = 1
3.webserver1的ip配置
rip：192.168.0.10网关指向dip：192.168.0.100
[root@webserver1 ~]# cat /etc/NetworkManager/system-connections/eth0.nmconnection
[connection]
id=eth0
type=ethernet
interface-name=eth0
[ethernet]
[ipv4]
address=192.168.0.10/24,192.168.0.100
method=manual
[ipv6]
addr-gen-mode=default
method=auto
[proxy]
[root@webserver1 ~]# nmcli connection reload
[root@webserver1 ~]# nmcli connection up eth0
[root@webserver1 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
link/ether 00:0c:29:5f:4a:ff brd ff:ff:ff:ff:ff:ff
altname enp3s0
altname ens160
inet 192.168.0.10/24 brd 192.168.0.255 scope global noprefixroute eth0
valid_lft forever preferred_lft forever
inet6 fe80::aae4:10d1:b082:a3e8/64 scope link noprefixroute
valid_lft forever preferred_lft forever
[root@webserver1 ~]# route -n
Kernel IP routing table
Destination Gateway Genmask Flags Metric Ref Use Iface
0.0.0.0 192.168.0.100 0.0.0.0 UG 100 0 0 eth0
192.168.0.0 0.0.0.0 255.255.255.0 U 100 0 0 eth0
4.webserver2的ip配置
rip：192.168.0.20网关指向dip：192.168.0.100
[root@webserver2 ~]# cat /etc/NetworkManager/system-connections/eth0.nmconnection
[connection]
id=eth0
type=ethernet
interface-name=eth0
[ethernet]
[ipv4]
address=192.168.0.20/24,192.168.0.100
method=manual
[ipv6]
addr-gen-mode=default
method=auto
[proxy]
[root@webserver2 ~]# nmcli connection reload
[root@webserver2 ~]# nmcli connection up eth0
[root@webserver2 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
link/ether 00:0c:29:ef:47:71 brd ff:ff:ff:ff:ff:ff
altname enp3s0
altname ens160
inet 192.168.0.20/24 brd 192.168.0.255 scope global noprefixroute eth0
valid_lft forever preferred_lft forever
inet6 fe80::4edb:9236:122:df1a/64 scope link noprefixroute
valid_lft forever preferred_lft forever
[root@webserver2 ~]# route -n
Kernel IP routing table
Destination Gateway Genmask Flags Metric Ref Use Iface
0.0.0.0 192.168.0.100 0.0.0.0 UG 100 0 0 eth0
192.168.0.0 0.0.0.0 255.255.255.0 U 100 0 0 eth0
5.webserver12端安装httpd,并编写测试网页，开启自启动
webserver1端
[root@webserver1 ~]# yum install httpd -y
[root@webserver1 ~]# echo webserver1-192.168.0.10 > /var/www/html/index.html
[root@webserver1 ~]# systemctl enable --now httpd
webserver2端
[root@webserver2 ~]# yum install httpd -y
[root@webserver2 ~]# echo webserver2-192.168.0.20 > /var/www/html/index.html
[root@webserver2 ~]# systemctl enable --now httpd
6.内网web服务测试
[root@lvs ~]# curl 192.168.0.10
webserver1-192.168.0.10
[root@lvs ~]# curl 192.168.0.20
webserver2-192.168.0.20
7.安装lvs软件ipvsadm
- 软件包名：
ipvsadm
[root@lvs ~]# yum install ipvsadm -y
8.查看策略
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
9.启动ipvsadm
- 注意：在启动
ipvsadm之前，需要存在/etc/sysconfig/ipvsadm文本文件，否则启动会失败
[root@lvs ~]# touch /etc/sysconfig/ipvsadm
[root@lvs ~]# systemctl restart ipvsadm
[root@lvs ~]# systemctl enable --now ipvsadm.service
10.添加策略
-m表示nat模式
[root@lvs ~]# ipvsadm -A -t 172.25.254.100:80 -s rr
[root@lvs ~]# ipvsadm -a -t 172.25.254.100:80 -r 192.168.0.10:80 -m
[root@lvs ~]# ipvsadm -a -t 172.25.254.100:80 -r 192.168.0.20:80 -m
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
TCP 172.25.254.100:80 rr
-> 192.168.0.10:80 Masq 1 0 0
-> 192.168.0.20:80 Masq 1 0 0
#当访问172.25.254.100:80端口时，使用rr轮询算法，转发到192.168.0.10:80或192.168.0.20:80中
- 当停止
ipvsadm服务后，会将策略自动写入/etc/sysconfig/ipvsadm文本中。所以策略是永久添加，添加完之后就会立即生效 - 也可以使用
ipvsadm-save命令实现永久保存策略
[root@lvs ~]# ipvsadm-save > /etc/sysconfig/ipvsadm
[root@lvs ~]# cat /etc/sysconfig/ipvsadm
-A -t lvs:http -s rr
-a -t lvs:http -r 192.168.0.10:http -m -w 1
-a -t lvs:http -r 192.168.0.20:http -m -w 1
11.lvs-nat模式测试效果
lvs-dr（企业当中最常用）
DR：Direct Routing，直接路由，LVS默认模式，应用最广泛，通过为请求报文重新封装一个MAC首部进行转发，源MAC是DIP所在的接口的MAC，目标MAC是某挑选出的RS的RIP所在接口的MAC地址源IP/PORT，以及目标IP/PORT均保持不变
dr模式数据逻辑
- 在
DR模式中，RS接收到访问请求后不需要回传给VS调度器，而是直接把回传数据发送给client客户端，所以RS和vs上都要有vip
dr模式数据传输过程
客户端发送数据帧给vs调度主机，数据帧中内容为客户端IP+客户端的MAC+VIP+VIP的MACVS调度主机接收到数据帧后把数据帧中的VIP的MAC改为RS1的MAC，此时数据帧中的数据为客户端IP+客户端的MAC+VIP+RS1的MACRS1收到数据包后做出响应回传数据包，响应数据包中的内容为VIP+RS1的MAC+客户端IP+客户端IP的MAC
dr模式的特点
Director（vs调度器）和各RS都配置有VIP- 确保
前端路由器将目标IP为VIP的请求报文发往Director RS的RIP可以使用私网地址，也可以是公网地址；RIP与DIP在同一IP网络（中间不能加路由器）RIP的网关不能指向DIP，以确保响应报文不会经由Director。需要指向边界路由的内网地址RS和Director要在同一个物理网络请求报文要经由Director，但响应报文不经由Director，而由RS直接发往Client不支持端口映射（端口不能修改）- 由于
dr模式下源目ip不变，只有二层mac发生变化，所以vs和rs的端口必须保持一致 RS可使用大多数OS系统- 在
RS上修改内核参数以限制arp通告及应答级别（使其只能接收，不能响应） vs是知道rs的主机网卡的mac，所以vs和rs需要处于同一vlan中，中间不能加路由器
实验拓扑
内网由仅主机ip负责通信，vip负责对外client和router之间是互联网。由于实验环境有限，为了让client访问到rs上，我们让client的网关指向router的nat，来模拟外网互通。lvs和rs的网关都指向router的仅主机（边界路由器的内网地址）- 为了
简单配置，对lo网卡进行设定（也可以对eth0网卡设定），使其成为vip
实验主机准备
- 准备
5台机子，一台client，一台router，一台lvs，两台webserver充当RS client上一个nat网卡router上一个nat网卡，一个仅主机网卡lvs上一个仅主机网卡用于内网通信，lo网卡用作vipRS上一个仅主机网卡用于内网通信，lo网卡用作vipclient的网关指向router的nat网卡，lvs，RS的网关指向router的仅主机网卡
主机准备
client上一个nat网卡
router上一个nat网卡，一个仅主机网卡
- 由于
router的nat模式和仅主机模式的网卡处于不同vlan，两个网卡要想通信，就必须打开Linux内核路由转发功能
lvs上一个仅主机网卡用于内网通信，lo网卡用作vip
RS上一个仅主机网卡用于内网通信，lo网卡用作vip
解决vip响应问题
dr模型中各主机上均需要配置vip，解决地址冲突的方式有三种：
- 在
前端网关做静态绑定 - 在
各RS使用arptables - 在
各RS修改内核参数，来限制arp响应和通告的级别
限制响应级别:arp_ignore
0：默认值，表示可使用本地任意接口上配置的任意地址进行响应1：仅在请求的目标IP配置在本地主机的接收到请求报文的接口上时，才给予响应
限制通告级别:arp_announce
0：默认值，把本机所有接口的所有信息向每个接口的网络进行通告1：尽量避免将接口信息向非直接连接网络进行通告2：必须避免将接口信息向非本网络进行通告
实验步骤
1.client的ip设定
nat网卡：172.25.254.10/24- 网关：
172.25.254.100/24
[root@client ~]# cat /etc/NetworkManager/system-connections/eth0.nmconnection
[connection]
id=eth0
uuid=3fe4f788-e5f3-4046-8a3e-6cdfb8098aab
type=ethernet
interface-name=eth0
[ethernet]
[ipv4]
address=172.25.254.10/24,172.25.254.100
method=manual
[ipv6]
addr-gen-mode=default
method=auto
[proxy]
[root@client ~]# route -n
Kernel IP routing table
Destination Gateway Genmask Flags Metric Ref Use Iface
0.0.0.0 172.25.254.100 0.0.0.0 UG 100 0 0 eth0
172.25.254.0 0.0.0.0 255.255.255.0 U 100 0 0 eth0
2.router上的ip设定
nat网卡：172.25.254.100/24仅主机网卡：192.168.0.10/24
[root@router ~]# cat /etc/NetworkManager/system-connections/eth0.nmconnection
[connection]
id=eth0
type=ethernet
interface-name=eth0
[ethernet]
[ipv4]
address=172.25.254.100/24
method=manual
[ipv6]
addr-gen-mode=default
method=auto
[proxy]
[root@router ~]# cat /etc/NetworkManager/system-connections/eth1.nmconnection
[connection]
id=eth1
type=ethernet
interface-name=eth1
[ethernet]
[ipv4]
address=192.168.0.10/24
method=manual
[ipv6]
addr-gen-mode=default
method=auto
[proxy]
3.router开启路由转发功能
[root@router ~]# vim /etc/sysctl.conf
net.ipv4.ip_forward=1 #在文件末尾添加
[root@router ~]# sysctl -p #加载
net.ipv4.ip_forward = 1
4.lvs主机中的ip设定
仅主机网卡：192.168.0.200/24lo网卡设置为vip：192.168.0.100/32网关指向：192.168.0.10/24
[root@lvs ~]# cat /etc/NetworkManager/system-connections/eth0.nmconnection
[connection]
id=eth0
uuid=3fe4f788-e5f3-4046-8a3e-6cdfb8098aab
type=ethernet
interface-name=eth0
[ethernet]
[ipv4]
address=192.168.0.200/24,192.168.0.10
method=manual
[ipv6]
addr-gen-mode=default
method=auto
[proxy]
[root@lvs ~]# ip addr add 192.168.0.100/32 dev lo
[root@lvs ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
inet 192.168.0.100/32 scope global lo
valid_lft forever preferred_lft forever
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
link/ether 00:0c:29:35:a8:7c brd ff:ff:ff:ff:ff:ff
altname enp3s0
altname ens160
inet 192.168.0.200/24 brd 192.168.0.255 scope global noprefixroute eth0
valid_lft forever preferred_lft forever
inet6 fe80::4e21:e4b4:36e:6d14/64 scope link noprefixroute
valid_lft forever preferred_lft forever
[root@lvs ~]# route -n
Kernel IP routing table
Destination Gateway Genmask Flags Metric Ref Use Iface
0.0.0.0 192.168.0.10 0.0.0.0 UG 100 0 0 eth0
192.168.0.0 0.0.0.0 255.255.255.0 U 100 0 0 eth0
5.webserver1主机中的ip设定
仅主机网卡：192.168.0.11/24lo网卡设置为vip：192.168.0.100/32网关指向：192.168.0.10/24
[root@webserver1 ~]# cat /etc/NetworkManager/system-connections/eth0.nmconnection
[connection]
id=eth0
uuid=3fe4f788-e5f3-4046-8a3e-6cdfb8098aab
type=ethernet
interface-name=eth0
[ethernet]
[ipv4]
address=192.168.0.11/24,192.168.0.10
method=manual
[ipv6]
addr-gen-mode=default
method=auto
[proxy]
[root@webserver1 ~]# ip addr add 192.168.0.100/32 dev lo
[root@webserver1 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
inet 192.168.0.100/32 scope global lo
valid_lft forever preferred_lft forever
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
link/ether 00:0c:29:5f:4a:ff brd ff:ff:ff:ff:ff:ff
altname enp3s0
altname ens160
inet 192.168.0.11/24 brd 192.168.0.255 scope global noprefixroute eth0
valid_lft forever preferred_lft forever
inet6 fe80::7baa:9520:639b:5e48/64 scope link noprefixroute
valid_lft forever preferred_lft forever
[root@webserver1 ~]# route -n
Kernel IP routing table
Destination Gateway Genmask Flags Metric Ref Use Iface
0.0.0.0 192.168.0.10 0.0.0.0 UG 100 0 0 eth0
192.168.0.0 0.0.0.0 255.255.255.0 U 100 0 0 eth0
6.webserver2主机中的ip设定
仅主机网卡：192.168.0.22/24lo网卡设置为vip：192.168.0.100/32网关指向：192.168.0.10/24
[root@webserver2 ~]# cat /etc/NetworkManager/system-connections/eth0.nmconnection
[connection]
id=eth0
uuid=3fe4f788-e5f3-4046-8a3e-6cdfb8098aab
type=ethernet
interface-name=eth0
[ethernet]
[ipv4]
address=192.168.0.22/24,192.168.0.10
method=manual
[ipv6]
addr-gen-mode=default
method=auto
[proxy]
[root@webserver2 ~]# ip addr add 192.168.0.100/32 dev lo
[root@webserver2 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
inet 192.168.0.100/32 scope global lo
valid_lft forever preferred_lft forever
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
link/ether 00:0c:29:ef:47:71 brd ff:ff:ff:ff:ff:ff
altname enp3s0
altname ens160
inet 192.168.0.22/24 brd 192.168.0.255 scope global noprefixroute eth0
valid_lft forever preferred_lft forever
inet6 fe80::5db8:7a0d:b282:fdbf/64 scope link noprefixroute
valid_lft forever preferred_lft forever
[root@webserver2 ~]# route -n
Kernel IP routing table
Destination Gateway Genmask Flags Metric Ref Use Iface
0.0.0.0 192.168.0.10 0.0.0.0 UG 100 0 0 eth0
192.168.0.0 0.0.0.0 255.255.255.0 U 100 0 0 eth0
7.RS主机禁用arp响应功能（让其只有lvs进行响应）
webserver1上- 只有先修改
all，才能再修改某一网卡
[root@webserver1 ~]# echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore
[root@webserver1 ~]# echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce
[root@webserver1 ~]# echo 1 > /proc/sys/net/ipv4/conf/lo/arp_ignore
[root@webserver1 ~]# echo 2 > /proc/sys/net/ipv4/conf/lo/arp_announce
webserver2上- 只有先修改
all，才能再修改某一网卡
[root@webserver2 ~]# echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore
[root@webserver2 ~]# echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce
[root@webserver2 ~]# echo 1 > /proc/sys/net/ipv4/conf/lo/arp_ignore
[root@webserver2 ~]# echo 2 > /proc/sys/net/ipv4/conf/lo/arp_announce
- 以上配置为
临时修改，重启无效。若想永久生效，则需要在/etc/sysctl.conf文件中添加
8.RS上配置web服务
webserver1上
[root@webserver1 ~]# yum install httpd -y
[root@webserver1 ~]# echo webserver1 > /var/www/html/index.html
webserver2上
[root@webserver2 ~]# yum install httpd -y
[root@webserver2 ~]# echo webserver2 > /var/www/html/index.html
9.RS上启动web服务
webserver1上
[root@webserver1 ~]# systemctl enable --now httpd
webserver2上
[root@webserver2 ~]# systemctl enable --now httpd
10.安装lvs软件包ipvsadm并启动
[root@lvs ~]# yum install ipvsadm -y
[root@lvs ~]# touch /etc/sysconfig/ipvsadm #在启动之前必须要有这个文件，否则启动失败
[root@lvs ~]# systemctl restart ipvsadm
[root@lvs ~]# systemctl enable ipvsadm
11.设置lvs策略并保存
-g表示dr模式
#当访问vip的80端口时，轮询调度到RS的80端口上
[root@lvs ~]# ipvsadm -A -t 192.168.0.100:80 -s rr
[root@lvs ~]# ipvsadm -a -t 192.168.0.100:80 -r 192.168.0.11:80 -g
[root@lvs ~]# ipvsadm -a -t 192.168.0.100:80 -r 192.168.0.22:80 -g
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
TCP 192.168.0.100:80 rr
-> 192.168.0.11:80 Route 1 0 0
-> 192.168.0.22:80 Route 1 0 0
[root@lvs ~]# ipvsadm -S > /etc/sysconfig/ipvsadm
[root@lvs ~]# cat /etc/sysconfig/ipvsadm
-A -t lvs:http -s rr
-a -t lvs:http -r 192.168.0.11:http -g -w 1
-a -t lvs:http -r 192.168.0.22:http -g -w 1
12.测试
client端访问vip
[root@client ~]# curl 192.168.0.100
webserver2
[root@client ~]# curl 192.168.0.100
webserver1
lvs-tun（了解）
转发方式：不修改请求报文的IP首部（源IP为CIP，目标IP为VIP），而在原IP报文之外再封装一个IP首部（源IP是DIP，目标IP是RIP），将报文发往挑选出的目标RS；RS直接响应给客户端（源IP是VIP，目标IP是CIP）
tun模式数据传输过程
客户端发送请求数据包，包内有源IP+vip+dport- 到达
vs调度器后对客户端发送过来的数据包重新封装添加IP报文头，新添加的IP报文头中包含TUNSRCIP(DIP)+TUNDESTIP(RSIP1)并发送到RS1 RS收到VS调度器发送过来的数据包做出响应，生成的响应报文中包含SRCIP(VIP)+DSTIP（CIP）+port，响应数据包通过网络直接回传给client
tun模式特点
DIP,VIP,RIP都应该是公网地址RS的网关一般不能指向DIP请求报文要经由Director，但响应不能经由Director不支持端口映射RS的OS系统须支持隧道功能
lvs-fullnat（了解）
fullnat：通过同时修改请求报文的源IP地址和目标IP地址进行转发CIP-->DIPVIP-->RIPVIP是公网地址，RIP和DIP是私网地址，且通常不在同一IP网络；因此，RIP的网关一般不会指向DIPRS收到的请求报文源地址是DIP，因此，只需响应给DIP；但Director还要将其发往Client请求和响应报文都经由Director- 支持
端口映射
注意
- 此类型
kernel默认不支持
lvs工作模式总结
| nat模式 | dr模式 | tun模式 | |
|---|---|---|---|
RS操作系统 | 不限 | 禁用arp响应 | 支持隧道 |
调度器和服务器网络 | 可跨网络 | 不可跨网络 | 可跨网络 |
调度服务器数量 | 少 | 多 | 多 |
RS服务器网关 | 指向到调度器DIP | 指向到边界路由器的内网地址 | 指向到边界路由器的内网地址 |
lvs-nat与lvs-fullnat：请求和响应报文都经由Directorlvs-nat：RIP的网关要指向DIPlvs-fullnat：RIP和DIP未必在同一IP网络，但要能通信lvs-dr与lvs-tun：请求报文要经由Director，但响应报文由RS直接发往Clientlvs-dr：通过封装新的MAC首部实现，通过MAC网络转发lvs-tun：通过在原IP报文外封装新IP头实现转发，支持远距离通信
lvs的调度算法
lvs调度算法类型
ipvs scheduler调度器：根据其调度时是否考虑各RS当前的负载状态被分为两种：静态方法和动态方法静态方法：仅根据算法本身进行调度，不考虑RS的负载情况动态方法：主要根据每台RS当前的负载状态及调度算法进行调度，overhead=value负载值较小的RS将被调度
lvs静态调度算法
rr：roundrobin轮询RS分别被调度，当RS配置有差别时不推荐wrr：Weighted RR，加权轮询，根据RS的配置进行加权调度，性能差的RS被调度的次数少sh：Source Hashing，源地址哈希，实现session sticky，对源IP地址进行hash；将来自于同一个IP地址的请求始终发往第一次挑中的RS，从而实现会话绑定。如果客户端内网有多个主机访问一个网站的时候，就会从同一个公网ip去访问服务器，就会导致RS服务器宕机dh：Destination Hashing；目标地址哈希，第一次轮询调度至RS，后续将发往同一个目标地址的请求始终转发至第一次 挑中的RS，典型使用场景是正向代理缓存场景中的负载均衡，如：宽带运营商
lvs动态调度算法
主要根据RS当前的负载状态及调度算法进行调度，Overhead value负载值较小的RS会被调度
-
LC：least connections（最少链接发）- 适用于
长连接应用，Overhead（负载值）=activeconns（活动链接数） x256+inactiveconns（非活动链接数） 活动链接数：tcp连接上，并且正在进行数据交互的非活动链接数：tcp连接上，没有进行数据交互的
- 适用于
-
WLC：Weighted LC（权重最少链接）默认调度方法，Overhead=(activeconnsx256+inactiveconns) /weightweight表示权重
-
SED：Shortest Expection Delay（初始连接高权重优先）Overhead= (activeconns+1+inactiveconns) x256/weight- 但是，当
RS1的权重为1，RS2的权重为10，经过运算前几次的调度都会被RS2承接 wlc和sed算法弊端相似
-
NQ：Never Queue，第一轮均匀分配到各RS中，后续SED -
LBLC：Locality-Based LC，动态的dh算法，使用场景：根据负载状态实现正向代理 -
LBLCR：LBLC with Replication，带复制功能的LBLC，解决LBLC负载不均衡问题，从负载重的复制到负载轻的RS
在4.15版本内核以后新增调度算法
-
FO(Weighted Fai Over)调度算法：常用作灰度发布- 在此
FO算法中，遍历虚拟服务所关联的真实服务器链表，找到还未过载(未设置IP_VS_DEST_FOVERLOAD标志)的且权重最高的真实服务器，进行调度 - 当
服务器承接大量链接，我们可以对此服务器进行过载标记（IP_VS_DEST_FOVERLOAD），那么vs调度器就不会把链接调度到有过载标记的主机中。 - 做
服务器更新时，使用到FO算法
- 在此
-
OVF(Overflow-connection)调度算法- 基于
真实服务器的活动连接数量和权重值实现。将新连接调度到权重值最高的真实服务器，直到其活动连接数量超过权重值，之后调度到下一个权重值最高的真实服务器，在此OVF算法中，遍历虚拟服务相关联的真实服务器链表，找到权重值最高的可用真实服务器。一个可用的真实服务器需要同时满足以下条件:未过载(未设置IP_VS_DEST_FOVERLOAD标志)真实服务器当前的活动连接数量小于其权重值- 其
权重值不为零
- 基于
查看内核支持的lvs算法
- 在
/boot/config-5.14.0-162.6.1.el9_1.x86_64文本中查看
[root@lvs ~]# cd /boot/
[root@lvs boot]# ls
config-5.14.0-162.6.1.el9_1.x86_64 #查看这个文件
efi
grub2
initramfs-0-rescue-5069a42cb215443bb46c2b9b08bfddc6.img
initramfs-5.14.0-162.6.1.el9_1.x86_64.img
loader
symvers-5.14.0-162.6.1.el9_1.x86_64.gz
System.map-5.14.0-162.6.1.el9_1.x86_64
vmlinuz-0-rescue-5069a42cb215443bb46c2b9b08bfddc6
vmlinuz-5.14.0-162.6.1.el9_1.x86_64
[root@lvs boot]# less config-5.14.0-162.6.1.el9_1.x86_64
# IPVS scheduler
# 以下就是lvs支持的调度算法
CONFIG_IP_VS_RR=m
CONFIG_IP_VS_WRR=m
CONFIG_IP_VS_LC=m
CONFIG_IP_VS_WLC=m
CONFIG_IP_VS_FO=m
CONFIG_IP_VS_OVF=m
CONFIG_IP_VS_LBLC=m
CONFIG_IP_VS_LBLCR=m
CONFIG_IP_VS_DH=m
CONFIG_IP_VS_SH=m
CONFIG_IP_VS_MH=m
CONFIG_IP_VS_SED=m
CONFIG_IP_VS_NQ=m
lvs命令介绍
lvs软件ipvsadm相关信息
- 程序包：
ipvsadm - 服务名：
ipvsadm.service - 主程序：
/usr/sbin/ipvsadm - 规则保存工具：
/usr/sbin/ipvsadm-save - 规则重载工具：
/usr/sbin/ipvsadm-restore - 配置文件：
/etc/sysconfig/ipvsadm-config ipvs调度规则文件：/etc/sysconfig/ipvsadm
ipvsadm命令
核心功能：
lvs集群服务器管理：增、删、改- 集群服务中对
RS服务器的管理：增、删、改` 规则查看
lvs集群中的增删改
管理集群服务lvs中的增删改
增加
-A添加
[root@lvs ~]# ipvsadm -A -t（tcp）|-u（udp）|-f（防护墙标签） \
> service-address (lvs集群地址) \
> [-s scheduler (调度算法)] \
> [-p [timeout]]
单个删除
-D删除
#删除单个规则
[root@lvs ~]# ipvsadm -D -t|-u|-f service-address
全部删除
-C全部删除
[root@lvs ~]# ipvsadm –C #清空所有规则
清空计数器
[root@lvs ~]# ipvsadm -Z [-t|u|f service-address] #清空指定的计数器数据
[root@lvs ~]# ipvsadm -Z #清空所有的计数器数据
修改
-E删除
[root@lvs ~]# ipvsadm -E -t（tcp）|-u（udp）|-f（防护墙标签） \
> service-address (lvs集群地址) \
> [-s scheduler (调度算法)] \
> [-p [timeout]]
| 参数 | 说明 |
|---|---|
| -A | 添加 |
| -E | 修改 |
| -D | 删除 |
| -t | tcp服务 |
| -u | udp服务 |
| -s | 指定调度算法，默认为WLC。注意：rr调度算法对权重不生效，wrr算法对权重生效 |
| -p | 设置持久连接超时，持久连接可以理解为在同一个时间段同一个来源的请求调度到同一Realserver |
| -f | firewall mask 火墙标记，是一个数字 |
| -S | 保存规则，等同于ipvsadm-save |
| -R | 重载，等同于ipvsadm-restore |
实例
[root@lvs ~]# ipvsadm -A -t 172.25.254.100:80 -s rr
[root@lvs ~]# ipvsadm -a -t 172.25.254.100:80 -r 192.168.0.10:80 -m
[root@lvs ~]# ipvsadm -a -t 172.25.254.100:80 -r 192.168.0.20:80 -m
[root@lvs ~]# ipvsadm -A -t 172.25.254.200:80 -s wrr
[root@lvs ~]# ipvsadm -a -t 172.25.254.200:80 -r 192.168.0.10:80 -m
[root@lvs ~]# ipvsadm -a -t 172.25.254.200:80 -r 192.168.0.20:80 -m
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
TCP 172.25.254.100:80 rr
-> 192.168.0.10:80 Masq 1 0 0
-> 192.168.0.20:80 Masq 1 0 0
TCP 172.25.254.200:80 wrr
-> 192.168.0.10:80 Masq 1 0 0
-> 192.168.0.20:80 Masq 1 0 0
[root@lvs ~]# ipvsadm -Ln --rate
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port CPS InPPS OutPPS InBPS OutBPS
-> RemoteAddress:Port
TCP 172.25.254.100:80 0 1 1 63 100
-> 192.168.0.10:80 0 1 0 36 57
-> 192.168.0.20:80 0 0 0 27 43
TCP 172.25.254.200:80 0 0 0 0 0
-> 192.168.0.10:80 0 0 0 0 0
-> 192.168.0.20:80 0 0 0 0 0
[root@lvs ~]# ipvsadm -Ln --rate
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port CPS InPPS OutPPS InBPS OutBPS
-> RemoteAddress:Port
TCP 172.25.254.100:80 0 1 1 63 100
-> 192.168.0.10:80 0 1 0 36 57
-> 192.168.0.20:80 0 0 0 27 43
[root@lvs ~]# ipvsadm -Z #清空计数器
[root@lvs ~]# ipvsadm -Ln --rate
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port CPS InPPS OutPPS InBPS OutBPS
-> RemoteAddress:Port
TCP 172.25.254.100:80 0 0 0 0 0
-> 192.168.0.10:80 0 0 0 0 0
-> 192.168.0.20:80 0 0 0 0 0
- 删除
172.25.254.200
[root@lvs ~]# ipvsadm -D -t 172.25.254.200:80
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
TCP 172.25.254.100:80 rr
-> 192.168.0.10:80 Masq 1 0 1
-> 192.168.0.20:80 Masq 1 0 1
- 删除防火墙标记
[root@lvs ~]# ipvsadm -D -f 66
- 修改调度算法
[root@lvs ~]# ipvsadm -E -t 172.25.254.100:80 -s wrr
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
TCP 172.25.254.100:80 wrr
-> 192.168.0.10:80 Masq 1 0 0
-> 192.168.0.20:80 Masq 1 0 0
- 清空全部规则
[root@lvs ~]# ipvsadm -C
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
ipvsadm-save等同于ipvsadm -S
[root@lvs ~]# ipvsadm -S
-A -t lvs:http -s rr
-a -t lvs:http -r 192.168.0.10:http -m -w 1
-a -t lvs:http -r 192.168.0.20:http -m -w 1
[root@lvs ~]# cat /etc/sysconfig/ipvsadm
[root@lvs ~]#
[root@lvs ~]# ipvsadm-save
-A -t lvs:http -s rr
-a -t lvs:http -r 192.168.0.10:http -m -w 1
-a -t lvs:http -r 192.168.0.20:http -m -w 1
[root@lvs ~]# cat /etc/sysconfig/ipvsadm
[root@lvs ~]#
- 保存规则
ipvsadm -S等同于ipvsadm-save
[root@lvs ~]# ipvsadm -S > /etc/sysconfig/ipvsadm
[root@lvs ~]# cat /etc/sysconfig/ipvsadm
-A -t lvs:http -s rr
-a -t lvs:http -r 192.168.0.10:http -m -w 1
-a -t lvs:http -r 192.168.0.20:http -m -w 1
#或者-n快速简单保存
[root@lvs ~]# ipvsadm -S -n > /etc/sysconfig/ipvsadm
[root@lvs ~]# cat /etc/sysconfig/ipvsadm
-A -t 172.25.254.100:80 -s rr
-a -t 172.25.254.100:80 -r 192.168.0.10:80 -m -w 1
-a -t 172.25.254.100:80 -r 192.168.0.20:80 -m -w 1
- 恢复策略（前提是：
/etc/sysconfig/ipvsadm文件中记录着策略）(所以-A添加的策略在内存中保存，-C删除了内存中的策略，通过ipvsadm -R或ipvsadm-restore命令进行恢复)
[root@lvs ~]# ipvsadm -C #先清空
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
[root@lvs ~]# ipvsadm -R < /etc/sysconfig/ipvsadm
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
TCP 172.25.254.100:80 rr
-> 192.168.0.10:80 Masq 1 0 0
-> 192.168.0.20:80 Masq 1 0 0
管理集群中RS的增删改
增加
-a添加
[root@lvs ~]# ipvsadm -a -t（tcp）|-u（udp）|-f（防火墙标签） service-address (lvs集群地址) \
> -r server-address（RS的地址） [-g | -i| -m] (工作模式) \
> [-w weight](权重)
删除
-d删除
[root@lvs ~]# ipvsadm -d -t|-u|-f service-address -r server-address
修改
-e修改
[root@lvs ~]# ipvsadm -e -t（tcp）|-u（udp）|-f（防火墙标签） service-address (lvs集群地址) \
> -r server-address（RS的地址） [-g | -i| -m] (工作模式) \
> [-w weight](权重)
| 参数 | 说明 |
|---|---|
-a | 添加real server |
-e | 更改real server |
-t | tcp协议 |
-u | udp协议 |
-f | 防火墙标签，是一个数字 |
-r | real server地址 |
-g | 直连路由模式 |
-i | ip隧道模式 |
-m | nat模式 |
-w | 设置权重 |
-Z | 清空计数器 |
-C | 清空lvs策略 |
-L | 查看lvs策略 |
-n | 不做解析 |
--rate | 输出速率信息 |
解决rr轮询错误
轮询规则中可能会遇到的错误
- 以
http和https为例，当我们在RS中同时开放80和443端口，那么默认控制是分开轮询的，这样我们就出现了一个轮询错乱的问题- 当我
第一次访问80被轮询到RS1后，下次访问443仍然会被轮询到RS1上
- 当我
问题复现
接dr模式的实验进行复现
webserver1上安装mod_ssl
[root@webserver1 ~]# yum install mod_ssl -y
webserver2上安装mod_ssl
[root@webserver2 ~]# yum install mod_ssl -y
安装完之后，证书和密钥就使用默认的
webserver1和webserver2上重启httpd
[root@webserver1 ~]# systemctl restart httpd
[root@webserver2 ~]# systemctl restart httpd
[root@webserver1 ~]# netstat -antlupe | grep httpd
tcp6 0 0 :::443 :::* LISTEN 0 99859 33051/httpd
tcp6 0 0 :::80 :::* LISTEN 0 99851 33051/httpd
[root@webserver2 ~]# netstat -antlupe | grep httpd
tcp6 0 0 :::443 :::* LISTEN 0 100552 32978/httpd
tcp6 0 0 :::80 :::* LISTEN 0 100544 32978/httpd
lvs主机添加443端口策略
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
TCP 192.168.0.100:80 rr
-> 192.168.0.11:80 Route 1 0 1
-> 192.168.0.22:80 Route 1 0 1
[root@lvs ~]# ipvsadm -A -t 192.168.0.100:443 -s rr
[root@lvs ~]# ipvsadm -a -t 192.168.0.100:443 -r 192.168.0.11:443 -g
[root@lvs ~]# ipvsadm -a -t 192.168.0.100:443 -r 192.168.0.22:443 -g
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
TCP 192.168.0.100:80 rr
-> 192.168.0.11:80 Route 1 0 0
-> 192.168.0.22:80 Route 1 0 0
TCP 192.168.0.100:443 rr
-> 192.168.0.11:443 Route 1 0 0
-> 192.168.0.22:443 Route 1 0 0
#以上是2个集群
- 测试（一个访问
http，一个访问https）
#-k访问时跳过证书
[root@client ~]# curl 192.168.0.100;curl -k https://192.168.0.100:443
webserver1
webserver1
[root@client ~]# curl 192.168.0.100;curl -k https://192.168.0.100:443
webserver2
webserver2
- 我们发现
不合理，应该是一个webserver1，一个webserver2 - 不合理的根本原因是：
两个集群是分开控制的
使用火墙标记解决rr轮询问题
FWM：FireWall MarkMARK target：可用于给特定的报文打标记--set-mark value- 其中：
value可为0xffff格式，表示十六进制数字，借助于防火墙标记来分类报文，而后基于标记定义集群服务：可将多个不同的应用使用同一个集群服务进行调度
- 其中：
在lvs中
#先清空lvs策略
[root@lvs ~]# ipvsadm -C
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
[root@lvs ~]# iptables -t mangle -nL
Chain PREROUTING (policy ACCEPT)
target prot opt source destination
Chain INPUT (policy ACCEPT)
target prot opt source destination
Chain FORWARD (policy ACCEPT)
target prot opt source destination
Chain OUTPUT (policy ACCEPT)
target prot opt source destination
Chain POSTROUTING (policy ACCEPT)
target prot opt source destination
- 在
lvs主机中为端口做标记
#在lvs调度器中设定端口标签，人为80和443是一个整体
[root@lvs ~]# iptables -t mangle -A PREROUTING -d 192.168.0.100 -p tcp -m multiport --dports 80,443 -j MARK --set-mark 66
#-d指定vip
[root@lvs ~]# iptables -t mangle -nL
Chain PREROUTING (policy ACCEPT)
target prot opt source destination
MARK tcp -- 0.0.0.0/0 192.168.0.100 multiport dports 80,443 MARK set 0x42
Chain INPUT (policy ACCEPT)
target prot opt source destination
Chain FORWARD (policy ACCEPT)
target prot opt source destination
Chain OUTPUT (policy ACCEPT)
target prot opt source destination
Chain POSTROUTING (policy ACCEPT)
target prot opt source destination
- 添加策略（在
lvs主机基于标记定义集群服务）
[root@lvs ~]# ipvsadm -A -f 66 -s rr
[root@lvs ~]# ipvsadm -a -f 66 -r 192.168.0.11 -g
[root@lvs ~]# ipvsadm -a -f 66 -r 192.168.0.22 -g
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
FWM 66 rr
-> 192.168.0.11:0 Route 1 0 0
-> 192.168.0.22:0 Route 1 0 0
- 测试结果（发现
现象合理，测试成功）
[root@client ~]# curl 192.168.0.100;curl -k https://192.168.0.100:443
webserver2
webserver1
[root@client ~]# curl 192.168.0.100;curl -k https://192.168.0.100:443
webserver2
webserver1
lvs持久链接
- 在我们
客户上网过程中有很多情况下需要和服务器进行交互，客户需要提交响应信息给服务器，如果单纯的进行调度会导致客户填写的表单丢失，为了解决这个问题我们可以用sh算法，但是sh算法比较简单粗暴，可能会导致调度失衡
解决方案
- 在进行
调度时，不管用什么算法，只要相同源过来的数据包我们就把他的访问记录在内存中，也就是把这个源的主机调度到了那个RS上 - 如果在
短期（默认360S）内，同源再来访问我仍然按照内存中记录的调度信息，把这个源的访问还调度到同一台RS上 - 如果
过了比较长的时间（默认最长时间360s）同源访问再次来访，那么就会被调度到其他的RS上
接火墙标记实验，我们通过-p参数，设置会话持久保持时间
- 如果
-p不指定数字，默认为360s
[root@lvs ~]# ipvsadm -E -f 66 -s rr -p 3
[root@lvs ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
FWM 66 rr persistent 3
-> 192.168.0.11:0 Route 1 0 0
-> 192.168.0.22:0 Route 1 0 0
- 测试
[root@client ~]# curl 192.168.0.100
webserver2
[root@client ~]# curl 192.168.0.100
webserver2
[root@client ~]# curl 192.168.0.100
webserver2
#等待3s过后
[root@client ~]# curl 192.168.0.100
webserver1
扫一扫
2078
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
