集群应用概述
概述
集群
- Cluster,集群、群集
- 由多台主机构成,但对外只表现为一个整体
应对问题
- 互联网应用中,随着站点对硬件性能、响应速度、服务稳定性、数据可靠性等要求越来越高,单台服务器力不从心
实现方法
- 使用价格昂贵的小型机、大型机
- 使用普通服务器构建服务集群
集群分类
根据群集所针对的日标的差异,可分为:负载均衡群、集高可用群集和高性能运算群集
负载均衡群集(Load Balance Cluster)
- 提高应用系统的响应能力、尽可能处理更多的访问请求、减少延迟为目标,获得高并发、高负载(LB)的整体性能
- LB的负载分配依赖于主节点的分流算法
高可用群集(High Availability Cluster)
- 提高应用系统的可靠性、尽可能地减少中断时间为目标,确保服务的连
续性,达到高可用(HA)的容错效果 - HA的工作方式包括双工和主从两种模式
高性能运算群集(High Performance Computer Cluster)
- 提高应用系统的CPU运算速度、扩展硬件资源和分析能力为目标,获得相当于大型、超级计算机的高性能运算(HPC)能力
- 高性能依赖于“分布式运算”、“并行计算”,通过专用硬件和软件将多个服务器的CPU、内存等资源整合在一起,实现只有大型、超级计算机才具备的计算能力
负载均衡集群架构
- VIP:用户访问群集的IP
- 负载调度器:调度用户的请求到服务器池中
- 服务器池:处理用户的请求
- 共享存储:服务器池的存储,服务器池中的服务器很多,要保证用户访问的内容一致就需要再服务器上部署很多相同的服务,存储很多相同的东西,要是一台一台去部署的话不太现实,使用 NFS共享存储,只需在NFS服务器上发布内容,服务器挂载使用即可。
负载均衡工作模式
负载均衡群集是目前企业用得最多的群集类型,群集的负载调度技术有三种工作模式:地址转换、IP隧道和直接路由
NAT地址转换
- Network Address Translation,简称NAT模式类似于防火墙的私有网络结构,负载调度器作为所有服务器节点的网关,即作为客户机的访问入口,也是各节点回应客户机的访问出口
- 服务器节点使用私有IP地址,与负载调度器
位于同一个物理网络,安全性要优于其他两
种方式
DR直接路由
- Direct Routing,简称DR模式采用半开放式的网络结构,与TUN模式的结构类似,但各节点并不是分散在各地,而是与调度器位于同一个物理网络
- 负载调度器与各节点服务器通过本地网络连接,不需要建立专用的IP隧道
IP隧道
- lPTunnel,简称TUN模式采用开放式的网络结构,负载调度器仅作为客户机的访问入口,各节点通过各自的Internet连接直接回应客户机,而不再经过负载调度器
- 服务器节点分散在互联网中的不同位置,具有独立的公网IP地址,通过专用IP隧道与负载调度器相互通信
LVS虚拟服务器
Linux Virtual Server
Linux Virtual Server
- 针对Linux内核的负载均衡解决方案
- 1998年5月,由我国的章文嵩博士创建
官方网站: http://www.linuxvirtualserver.orgl
[root@localhost~]# modprobe ip_vs
确认内核对LVS的支持
[root@localhost~j]# cat /proc/net/ip_vs
iPVirtual Server version1.2.1(size=4096)
Prot LocalAddress:Port Scheduler Flags
->RemoteAddress:Port Forward Weight ActiveConn InActConn
LVS负载调度算法
轮询(Round Robin)
- 将收到的访问请求按照顺序轮流分配给群集中的各节点(真实服务器),
- 均等地对待每一台服务器,而不管服务器实际的连接数和系统负载
加权轮询(Weighted Round Robin)
- 根据调度器设置的权重值来分发请求,权重值高的节点优先获得任务,分
配的请求数越多 - 保证性能强的服务器承担更多的访问流量
最少连接(Least Connections)
- 根据真实服务器已建立的连接数进行分配,将收到的访问请求优先分配给连接数最少的节点
加权最少连接(Weighted Least Connections)
- 在服务器节点的性能差异较大时,可以为真实服务器自动调整权重
- 性能较高的节点将承担更大比例的活动连接负载
LVS集群的创建与管理
- 创建虚拟服务器
- 添加、删除服务器节点
- 查看集群及节点情况
- 保存负载分配策略
LVS集群简单部署
LVS-NAT部署
部署环境
LVS负载调度器:13.0.0.1/24、192.168.10.1/24 安装ipvsadm
后端服务器server1:192.168.10.10/24 安装httpd
后端服务器server2:192.168.10.20/24 安装httpd
NFS服务器:192.168.10.30/24 安装nfs-utils、rpcbind
客户端:13.0.0.10/24
客户端为Windows10 其他均为centos7
部署步骤
软件安装
可以先选择nat网卡,去安装相应的软件后再换成仅主机
在除客户端之外的设备上安装,安装完把网卡改成仅主机
[root@localhost ~]#yum -y install httpd ipvsadm nfs-utils rpcbind
开启server1和server2的httpd服务
server1
[root@localhost ~]# iptables -F
[root@localhost ~]# setenforce 0
[root@localhost ~]# vim /var/www/html/index.html
<h1>Welcome to njit</h1>
保存退出
[root@localhost ~]# systemctl start httpd
server2
[root@localhost ~]# iptables -F
[root@localhost ~]# setenforce 0
[root@localhost ~]# vim /var/www/html/index.html
<h1>NJIU Fighting</h1>
保存退出
[root@localhost ~]# systemctl start httpd
LVS负载均衡调度器
[root@localhost ~]#modprode ip_vs
[root@localhost ~]#cat /proc/net/ip_vs
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
[root@localhost ~]# iptables -F
[root@localhost ~]# setenforce 0
[root@localhost ~]#vim nat.sh
#!/bin/bash
#
echo "1" > /proc/sys/net/ipv4/ip_forward
ipvsadm -C
ipvsadm -A -t 13.0.0.1:80 -s rr
ipvsadm -a -t 13.0.0.1:80 -r 192.168.10.10:80 -m
ipvsadm -a -t 13.0.0.1:80 -r 192.168.10.20:80 -m
保存退出
[root@localhost ~]#chmod +x nat.sh
[root@localhost ~]#./nat.sh
[root@localhost ~]#ipvsadm -L
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
TCP localhost.localdomain:http rr
-> 192.168.10.10:http Masq 1 0 0
-> 192.168.10.20:http Masq 1 0 0
可以去客户端访问13.0.0.1,刷新网页即可看到两份内容,因为调度器会分配到两台服务器上去处理
配置NFS共享存储
[root@localhost ~]#systemctl start rpcbind
[root@localhost ~]#systemctl start nfs
[root@localhost ~]#mkdir /opt/njit
[root@localhost ~]#vim /etc/exports
/opt/njit 192.168.10.0/24(rw,sync)
保存退出
[root@localhost ~]#vim /opt/njit/index.html
<h1>Shared station</h1>
保存退出
[root@localhost ~]#exportfs -rv
exporting 192.168.10.0/24:/opt/njit
到服务器server1和server2上去挂载,同样的操作
[root@localhost ~]# showmount -e 192.168.10.30
Export list for 192.168.10.30:
/opt/njit 192.168.10.0/24
[root@localhost ~]#vim /etc/fstab
192.168.10.30:/opt/njit /var/www/html nfs defaults 0 0
保存退出
[root@localhost ~]#mount -a
[root@localhost ~]#df -Th
去客户端访问13.0.0.1的话,现在只会出现我们在NFS服务器上共享出来的目录下的index.html中的内容