haproxy的安装
yum install -y haproxy
haproxy基本配置
global:全局配置段
进程及安全配置相关的参数
性能调整相关参数
Debug参数
proxies:代理配置段
defaults:为frontend, backend, listen提供默认配置
frontend:前端,相当于nginx中的server {}
backend:后端,相当于nginx中的upstream {}
listen:同时拥有前端和后端配置,配置简单,生产推荐使用
haproxy配置
yum install haproxy -y
vim /etc/haproxy/haproxy.cfg
# turn on stats unix socket
stats socket /var/lib/haproxy/stats1 mode 600 level admin process 1
stats socket /var/lib/haproxy/stats2 mode 600 level admin process 2
# utilize system-wide crypto-policies
ssl-default-bind-ciphers PROFILE=SYSTEM
ssl-default-server-ciphers PROFILE=SYSTEM
nbproc 2
cpu-map 1 0
cpu-map 2 1
vim /etc/haproxy/haproxy.cfg
# turn on stats unix socket
stats socket /var/lib/haproxy/stats1 mode 600 level admin process 1
stats socket /var/lib/haproxy/stats2 mode 600 level admin process 2
# utilize system-wide crypto-policies
ssl-default-bind-ciphers PROFILE=SYSTEM
ssl-default-server-ciphers PROFILE=SYSTEM
nbthread 2
defaults配置
defaults
mode http #默认工作类型
log global
option httplog
option dontlognull
option http-server-close
option forwardfor except 127.0.0.0/8
option redispatch
retries 3
timeout http-request 10s
timeout queue 1m
timeout connect 10s #最长连接等待时间
timeout client 1m #与客户端最长非活动时间
timeout server 1m #请求处理时长
timeout http-keep-alive 10s #会话保持超时时间
timeout check 10s #默认检测时间
maxconn 3000
frontend
frontend main
bind *:5000 #监听地址及其端口号
use_backend static if url_static
default_backend app
backed配置
mode httpltcp #指定负载协议类型,和对应的frontend必须一致
option #配置选项
server #定义后端realserver,必须指定IP和端口
listen配置
listen webserver_80
bind 172.25.254.100:80
mode http
option forwardfor
server webserver1 192.168.0.101:80 check inter 3s fa11 3 rise 5
server webserver2 192.168.0.102:80 check inter 3s fa11 3 rise 5
静态算法:按照事先定义好的规则轮询公平调度,不关心后端服务器的当前负载、连接数和响应速度等,且无法实时修改权重(只能为0和1,不支持其它值),只能靠重启HAProxy生效
roundrobin
1. 基于权重的轮询动态调度算法
2. 支持权重的运行时调整,不同于lvs中的rr轮训模式
3. HAProxy中的roundrobin支持慢启动(新加的服务器会逐渐增加转发数)
4. 其每个后端backend中最多支持4095个real server
5. 支持对real server权重动态调整
6. roundrobin为默认调度算法,此算法使用广泛
leastconn
1.leastconn加权的最少连接的动态
2.支持权重的运行时调整和慢启动,即:根据当前连接最少的后端服务器而非权重进行优先调度(新客户 端连接)
3.比较适合长连接的场景使用,比如:MySQL等场景
一致性hash
- 一致性哈希,当服务器的总权重发生变化时,对调度结果影响是局部的,不会引起大的变动hash(o) mod n
- 该hash算法是动态的,支持使用 socat等工具进行在线权重调整,支持慢启动
-
1、后端服务器哈希环点keyA=hash(后端服务器虚拟ip)%(2^32)
2、客户机哈希环点key1=hash(client_ip)%(2^32) 得到的值在[0---4294967295]之间
3、将keyA和key1都放在hash环上,将用户请求调度到离key1最近的keyA对应的后端服务器
-
hash环偏斜问题
-
增加虚拟服务器IP数量,比如:一个后端服务器根据权重为1生成1000个虚拟IP,再hash。而后端服务器权 重为2则生成2000的虚拟IP,再bash,最终在hash环上生成3000个节点,从而解决hash环偏斜问题
uri
基于对用户请求的URI的左半部分或整个uri做hash,再将hash结果对总权重进行取模后
根据最终结果将请求转发到后端指定服务器
适用于后端是缓存服务器场景
默认是静态算法,也可以通过hash-type指定map-based和consistent,来定义使用取模法还是一致性 hash
haproxy部署
cat /var/www/html/index.html
webserver1 172.25.254.10
systemctl restart httpd
vim /etc/haproxy/haproxy.cfg
listen webcluster
bind *:80
mode http
balance roundrobin
server web1 172.25.254.10:80
server web2 172.25.254.20:80
##########
frontend main
bind *:5000
systemctl restart haproxy.service
curl 172.25.254.100
webserver1 172.25.254.10
curl 172.25.254.100
webserver2 172.25.254.20
curl 172.25.254.100
webserver1 172.25.254.10
curl 172.25.254.100
webserver2 172.25.254.20
HAProxy状态页
vim /etc/haproxy/conf.d
listen stats
bind *:80
mode http
balance static-rr
stats enable
stats uri /status
stats auth m12312
server web1 192.168.76.121:80 check inter 3 fall 4 rise 5 weight 1
server web2 192.168.76.122:80 check inter 3 fall 4 rise 5 weight 1
四层IP透传
[root@web1 ~]# cat /etc/nginx/nginx.conf
http {
log_format main '$remote_addr - $remote_user [$time_local] "$request" '
'$status $body_bytes_sent "$http_referer" '
' "$proxy_protocol_addr"'
'"$http_user_agent" "$http_x_forwarded_for"';
server {
listen 80 proxy_protocol;
listen [::]:80;
server_name _;
root /usr/share/nginx/html;
[root@haproxy conf.d]# cat ip.cfg
listen ip
bind *:80
mode tcp
balance roundrobin
server web1 192.168.76.121:80 send-proxy check inter 3 fall 3 rise 5 weight 1
server web2 192.168.76.122:80 check inter 3 fall 3 rise 5 weight 1
七层IP透传
[root@web1 ~]# cat /etc/nginx/nginx.conf
http {
log_format main '"$proxy_add_x_forwarded_for" - $remote_user [$time_local] "$request" '
'$status $body_bytes_sent "$http_referer" '
'"$http_user_agent" "$http_x_forwarded_for"';
server {
listen 80;
listen [::]:80;
server_name _;
root /usr/share/nginx/html;
[root@haproxy conf.d]# cat ip.cfg
listen ip
bind *:80
mode http #七层透传
balance roundrobin
server web1 192.168.76.121:80 send-proxy check inter 3 fall 3 rise 5 weight 1
server web2 192.168.76.122:80 check inter 3 fall 3 rise 5 weight 1
ACL-Name 名称
acl test path_ end -m sub /a
#ACL名称,可以使用大字母A-Z、小写字母a-z、数字0-9、冒号:、点.、中横线和下划线,并且严格区分大
小写,比如:my_acl和My_Acl就是两个完全不同的acl5.8.1.2 ACL-criterion
ACL-criterion 匹配规范
定义ACL匹配规范,即:判断条件
hdr string,提取在一个HTTP请求报文的首部
hdr([<name> [,<occ>]]):完全匹配字符串,header的指定信息,<occ> 表示在多值中使用的值的出
现次数
hdr_beg([<name> [,<occ>]]):前缀匹配,header中指定匹配内容的begin
hdr_end([<name> [,<occ>]]):后缀匹配,header中指定匹配内容end
hdr_dom([<name> [,<occ>]]):域匹配,header中的dom(host)
hdr_dir([<name> [,<occ>]]):路径匹配,header的uri路径
hdr_len([<name> [,<occ>]]):长度匹配,header的长度匹配
hdr_reg([<name> [,<occ>]]):正则表达式匹配,自定义表达式(regex)模糊匹配
hdr_sub([<name> [,<occ>]]):子串匹配,header中的uri模糊匹配 模糊匹配c 报文中a/b/c也会匹
配
#示例:
hdr(<string>) 用于测试请求头部首部指定内容
hdr_dom(host) 请求的host名称,如 www.timinglee.org
hdr_beg(host) 请求的host开头,如 www. img. video. download. ftp.
hdr_end(host) 请求的host结尾,如 .com .net .cn
#示例:
acl bad_agent hdr_sub(User-Agent) -i curl wget
http-request deny if bad_agent
#有些功能是类似的,比如以下几个都是匹配用户请求报文中host的开头是不是www
acl short_form hdr_beg(host) www.
acl alternate1 hdr_beg(host) -m beg www.
acl alternate2 hdr_dom(host) -m beg www.
acl alternate3 hdr(host) -m beg www.
base : string
#返回第一个主机头和请求的路径部分的连接,该请求从主机名开始,并在问号之前结束,对虚拟主机有用
<scheme>://<user>:<password>@#<host>:<port>/<path>;<params>#?<query>#<frag>
base : exact string match
base_beg : prefix match
base_dir : subdir match
base_dom : domain match
base_end : suffix match
base_len : length match
base_reg : regex match
base_sub : substring match
path : string
#提取请求的URL路径,该路径从第一个斜杠开始,并在问号之前结束(无主机部分)
<scheme>://<user>:<password>@<host>:<port>#/<path>;<params>#?<query>#<frag>
path : exact string match
path_beg : prefix match #请求的URL开头,如/static、/images、/img、/css
path_end : suffix match #请求的URL中资源的结尾,如 .gif .png .css .js .jpg .jpeg
path_dom : domain match
path_dir : subdir match
path_len : length match
path_reg : regex match
path_sub : substring match
#提取请求中的整个URL。
url :exact string match
url_beg : prefix match
url_dir : subdir match
url_dom : domain match
url_end : suffix match
url_len : length match
url_reg : regex match
url_sub : substring match
dst #目标IP
dst_port #目标PORT
src #源IP
src_port #源PORT
#示例:
acl invalid_src src 10.0.0.7 192.168.1.0/24
acl invalid_src src 172.16.0.0/24
acl invalid_port src_port 0:1023
status : integer #返回在响应报文中的状态码
#七层协议
acl valid_method method GET HEAD
http-request deny if ! valid_method
ACL-flags 匹配模式
-i 不区分大小写
-m 使用指定的正则表达式匹配方法
-n 不做DNS解析
-u 禁止acl重名,否则多个同名ACL匹配或关系
ACL-operator 具体操作符
整数比较:eq、ge、gt、le、lt
字符比较:
- exact match (-m str) :字符串必须完全匹配模式
- substring match (-m sub) :在提取的字符串中查找模式,如果其中任何一个被发现,ACL将匹配
- prefix match (-m beg) :在提取的字符串首部中查找模式,如果其中任何一个被发现,ACL将匹配
- suffix match (-m end) :将模式与提取字符串的尾部进行比较,如果其中任何一个匹配,则ACL进行匹配
- subdir match (-m dir) :查看提取出来的用斜线分隔(“/")的字符串,如其中任一个匹配,则ACL进行匹配
- domain match (-m dom) :查找提取的用点(“.")分隔字符串,如果其中任何一个匹配,则ACL进行匹配
ACL-value 操作对象
value的类型
The ACL engine can match these types against patterns of the following types :
- Boolean #布尔值
- integer or integer range #整数或整数范围,比如用于匹配端口范围
- IP address / network #IP地址或IP范围, 192.168.0.1 ,192.168.0.1/24
- string--> www.exam.org
exact #精确比较
substring #子串
suffix #后缀比较
prefix #前缀比较
subdir #路径, /wp-includes/js/jquery/jquery.js
domain #域名,www.exam.org
- regular expression #正则表达式
- hex block #16进制
域名匹配
[root@haproxy conf.d]# cat http.cfg
frontend http
bind *:80
mode http
acl webhost hdr_dom(host) www.zhou.com #定义acl规则
use_backend test if webhost #达成webhost执行test、否则执行test1
default_backend test1
backend test
mode http
server web1 192.168.76.121:80 check inter 3 fall 3 rise 5 weight 1
backend test1
mode http
server web2 192.168.76.122:80 check inter 3 fall 3 rise 5 weight 1
源IP、子网调度
[root@haproxy conf.d]# cat http1.cfg
frontend http1
bind *:80
mode http
acl webhost src 172.25.254.2 192.168.0.0/24
use_backend test2 if webhost
default_backend test3
backend test2
mode http
server web1 192.168.76.121:80 check inter 3 fall 3 rise 5 weight 1
backend test3
mode http
server web2 192.168.76.122:80 check inter 3 fall 3 rise 5 weight 1
匹配浏览器类型
[root@haproxy conf.d]# cat http2.cfg
frontend http
bind *:80
mode http
acl webhost1 hdr_sub(User-Agent) -i wget
#acl webhost1 hdr_sub(User-Agent) -i curl
http-request deny if webhost1 #符合webhost1条件拒绝连接
default_backend b
backend a
mode http
server web1 192.168.76.121:80 check inter 3 fall 3 rise 5 weight 1
backend b
mode http
server web2 192.168.76.122:80 check inter 3 fall 3 rise 5 weight 1
HAProxy的https实现
[root@haproxy certs]# openssl req -newkey rsa:2048 -nodes -sha256 -keyout /etc/haproxy/certs/zy.key -x509 -days 365 -out /etc/haproxy/certs/zy.crt
[root@haproxy certs]#cat /etc/haproxy/certs/zy.key /etc/haproxy/certs/zy.crt > /etc/haproxy/zy.pem
haproxy ~]# vim /etc/haproxy/haproxy.cfg
frontend webserver
bind *:80
redirect scheme https if !{ ssl_fc }
mode http
use_backend webcluster
frontend webserver-https
bind *:443 ssl crt /etc/haproxy/zy.pem
mode http
use_backend webcluster
backend webcluster
mode http
balance roundrobin
server web1 192.168.76.121:80 check inter 3s fall 3 rise 5
server web2 192.168.76.122:80 check inter 3s fall 3 rise 5