Linux 私房菜————Haproxy|负载调度算法|Web负载均衡|部署Nginx服务器|

最新推荐文章于 2023-07-09 20:40:54 发布
最新推荐文章于 2023-07-09 20:40:54 发布
阅读量161 收藏
点赞数
分类专栏： Shell 文章标签： 数据库 运维 负载均衡 nginx linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43301008/article/details/118159594
版权

Haproxy 集群技术

1.常见的Web集群调度器

  • 目前常见的web集群调度器分为软件和硬件
  • 软件通常使用开源的LVS、Haproxy、Nginx
  • 硬件一般使用比较多的是F5，也有很多人使用国内的一些产品，如梭子鱼、绿盟等

2.Haproxy应用分析

  • HAProxy 是一个使用 C语言编写的自由及开放源代码软件，其提供高可用性、负载均衡，以及基于TCP 和 HTTP 的应用程序代理软件。
  • HAProxy 特别适用于负载大的Web站点，这些站点通常又需要会话保持或七层处理。
  • HAProxy 运行在硬件上可支持数万计的并发连接的连接请求。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中， 同时可以保护你的web服务器不被暴露到网络上。

LVS在企业应用中抗负载能力很强，但存在不足：

  • LVS不支持正则处理，不能实现动静分离；
  • 对于大型网站，LVS的实施配置复杂，维护成功相对较高；

2.1 HAProxy的主要特性

  • 可靠性和稳定性非常好，可以与硬件级的F5负载均衡设备相媲美；
  • 最高可以同时维护40000-50000个并发连接，单位时间内处理的最大请求数为20000个，最大处理能力可达10Git/s；
  • 支持多达8种负载均衡算法，同时也支持会话保持；
  • 支持虚机主机功能，从而实现web负载均衡更加灵活；
  • 支持连接拒绝、全透明代理等独特的功能；
  • 拥有强大的ACL支持，用于访问控制；
  • 其独特的弹性二叉树数据结构，使数据结构的复杂性上升到了0(1)，即数据的查寻速度不会随着数据条目的增加而速度有所下降；
  • 支持客户端的keepalive功能，减少客户端与haproxy的多次三次握手导致资源浪费，让多个请求在一个tcp连接中完成；
  • 支持TCP加速，零复制功能，类似于mmap机制；
  • 支持响应池（response buffering）；
  • 支持RDP协议；
  • 基于源的粘性，类似nginx的ip_hash功能，把来自同一客户端的请求在一定时间内始终调度到上游的同一服务器；
  • 更好统计数据接口，其web接口显示后端集群中各个服务器的接收、发送、拒绝、错误等数据的统计信息；
  • 详细的健康状态检测，web接口中有关于对上游服务器的健康检测状态，并提供了一定的管理功能；
  • 基于流量的健康评估机制；
  • 基于http认证；
  • 基于命令行的管理接口；
  • 日志分析器，可对日志进行分析。

2.2 HAProxy 常见8种负载均衡策略

roundrobin表示简单的轮询。
static-rr表示根据权重。
leastconn表示最少连接者先处理。
source表示根据请求的源IP，类似Nginx的IP_hash机制。
ri表示根据请求的URI。
rl_param表示根据HTTP请求头来锁定每一次HTTP请求。
rdp-cookie(name)表示根据据cookie(name)来锁定并哈希每一次TCP请求。

2.3 LVS、Nginx、HAproxy的区别

  • LVS基于Linux操作系统实现软负载均衡，而HAProxy和Nginx是基于第三方应用实现的软负载均衡；
  • LVS是可实现4层的IP负载均衡技术，无法实现基于目录、URL的转发。而HAProxy和Nginx都可以实现4层和7层技术，HAProxy可提供TCP和HTTP应用的负载均衡综合解决方案；
  • LVS因为工作在ISO模型的第四层，其状态监测功能单一，而HAProxy在状监测方面功能更丰富、强大，可支持端口、URL、脚本等多种状态检测方式；
  • HAProxy功能强大，但整体性能低于4层模式的LVS负载均衡。
  • Nginx主要用于Web服务器或缓存服务器。

3.Haproxy调度算法原理

Haproxy支持多种调度算法，最常用的有三种

RR （Round Robin）

  • RR算法是最简单常用的一种算法，即轮询调度
    LC（Least Connections）
  • 最小连接数算法，根据后端的节点连接数大小动态分配前端请求。
    SH（Source Hashing）
  • 基于来源访问调度算法，用于一些有Session会话记录在服务器端的场景，可以基于来源的IP、Cookie等做集群调度

4.Haproxy搭建 Web 群集

实验所需安装包

haproxy-1.5.19.tar.gz
nginx-1.12.0.tar.gz

环境配置

主机操作系统IP地址所需软件/安装包/工具
Haproxy-ServerCentOS7 192.168.184.10haproxy-1.5.19.tar.gz
Nginx-Server1CentOS7 192.168.184.20nginx-1.12.0.tar.gz
Nginx-Server2CentOS7 192.168.184.30nginx-1.12.0.tar.gz
客户端CentOS7 192.168.184.40————

4.1 部署haproxy服务器（192.168.184.10）

1.关闭防火墙，将安装Haproxy所需软件包传到/opt目录下

systemctl stop firewalld
setenforce 0

cd /opt
haproxy-1.5.19.tar.gz

2.编译安装 Haproxy

yum install -y pcre-devel bzip2-devel gcc gcc-c++ make

tar zxvf haproxy-1.5.19.tar.gz
cd haproxy-1.5.19/
make TARGET=linux2628 ARCH=x86_64
make install

参数说明

TARGET=linux26ARCH=x86_64
内核版本系统位数，64位系统

使用uname -r查看内核，如：2.6.18-371.el5，此时该参数用TARGET=linux26；kernel大于2.6.28的用TARGET=linux2628

3.Haproxy服务器配置

mkdir /etc/haproxy
cp examples/haproxy.cfg /etc/haproxy/

cd /etc/haproxy/
vim haproxy.cfg
global

–4~5行–修改，配置日志记录，local0为日志设备，默认存放到系统日志

log /dev/log   local0 info		
log /dev/log   local0 notice
#log loghost    local0 info
maxconn 4096					#最大连接数，需考虑ulimit-n限制

–8行–注释，chroot运行路径，为该服务自设置的根目录，一般需将此行注释掉

#chroot /usr/share/haproxy
uid 99							#用户UID
gid 99							#用户GID
daemon							#守护进程模式

defaults        
log     global					#定义日志为global配置中的日志定义
mode    http					#模式为http
option  httplog					#采用http日志格式记录日志
option  dontlognull				#不记录健康检查日志信息
retries 3						#检查节点服务器失败次数，连续达到三次失败，则认为节点不可用
redispatch						#当服务器负载很高时，自动结束当前队列处理比较久的连接
maxconn 2000					#最大连接数
contimeout      5000			#连接超时时间
clitimeout      50000			#客户端超时时间
srvtimeout      50000			#服务器超时时间

–删除下面所有listen项–，添加

listen  webcluster 0.0.0.0:80		
    option httpchk GET /test.html	#检查服务器的test.html文件
    balance roundrobin				#负载均衡调度算法使用轮询算法roundrobin
    server inst1 192.168.184.20:80 check inter 2000 fall 3		#定义在线节点
    server inst2 192.168.184.30:80 check inter 2000 fall 3

4.2 编译安装Nginx服务器（192.168.184.20、192.168.184.30）

systemctl stop firewalld
setenforce 0

yum install -y pcre-devel zlib-devel gcc gcc-c++ make 

useradd -M -s /sbin/nologin nginx

cd /opt
tar zxvf nginx-1.12.0.tar.gz -C /opt/

cd nginx-1.12.0/
./configure --prefix=/usr/local/nginx --user=nginx --group=nginx

make && make install

ln -s /usr/local/nginx/sbin/nginx /usr/local/sbin/

nginx      #启动nginx 服务

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

192.168.184.20

echo "this is lic web" > /usr/local/nginx/html/test.html

在这里插入图片描述

192.168.184.30

echo "this is kiki web" > /usr/local/nginx/html/test.html

在这里插入图片描述

启动Haproxy服务（192.168.184.10）

cp /opt/haproxy-1.5.19/examples/haproxy.init /etc/init.d/haproxy
cd /etc/init.d/
ls
chmod +x haproxy
chkconfig --add /etc/init.d/haproxy
ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy

service haproxy start	或	/etc/init.d/haproxy start

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

5.测试 Web集群

在客户端使用浏览器打开 http://192.168.184.10/test.html ，不断刷新浏览器测试负载均衡效果

在这里插入图片描述

在这里插入图片描述

6.日志定义

  默认haproxy的日志是输出到系统的syslog中，查看起来不是非常方便，为了更好的管理haproxy的日志，我们在生产环境中一般单独定义出来。需要将haproxy的info及notice日志分别记录到不同的日志文件中。

vim /etc/haproxy/haproxy.cfg
global
	log /dev/log local0 info
	log /dev/log local0 notice

service haproxy restart

  需要修改rsyslog配置，为了便于管理。将haproxy相关的配置独立定义到haproxy.conf，并放到/etc/rsyslog.d/下，rsyslog启动时会自动加载此目录下的所有配置文件。

vim /etc/rsyslog.d/haproxy.conf

if ($programname == 'haproxy' and $syslogseverity-text == 'info')
then -/var/log/haproxy/haproxy-info.log
&~
if ($programname == 'haproxy' and $syslogseverity-text == 'notice')
then -/var/log/haproxy/haproxy-notice.log
&~

说明：
  这部分配置是将haproxy的info日志记录到/var/log/haproxy/haproxy-info.log下，将notice日志记录到/var/log/haproxy/haproxy-notice.log下。“&~”表示当日志写入到日志文件后，rsyslog停止处理这个信息。

systemctl restart rsyslog.service

tail -f /var/log/haproxy/haproxy-info.log		#查看haproxy的访问请求日志信息
不会开飞机的舒克i
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
linux服务器之LVS、Nginx和HAProxy负载均衡器对比总结
09-15
本篇文章将对比三种常用的Linux服务器负载均衡器：LVS、Nginx和HAProxy，探讨其各自的特点、适用场景和常用算法。 LVS（Linux Virtual Server）是基于IP层的负载均衡器，它具有以下显著特点： 1. 高抗负载能力：...
linux 26,我应该使用haproxy的“linux2628”或“linux26”制作目标吗？
weixin_28681255的博客
05-26 396
Due to too many reports of suboptimized setups, building withoutspecifying the target is no longer supported. Please specify thetarget OS in the TARGET variable, in the following form:make TARGET=xxxP...
Haproxy安装和配置负载
tianmunan的博客
07-19 874
一、实验环境 实验用途 IP地址 操作系统 haproxy 192.168.31.61 Centos7.9 转发1 192.168.31.62 Centos7.9 转发2 192.168.31.63 Centos7.9 需要关闭selinux，防火墙，并清空Iptables规则。 软件名称 版本 haproxy 2.5 二、实验原理 HAProxy 概述： HAProxy 提供高可用性、负载均衡以及基于 TCP 和 HTTP 应用的代理，支持虚拟主机，它是免费
在几分钟内启动并运行HAPROXY
danpob13624的博客
04-05 112
我试图HAProxy的我WEBAPP（上托管的Tomcat）-reason使用HAProxy的是，它也支持的WebSockets和服务器推送我目前的项目所使用的WebSockets。 第一步，我使用裸露的Web应用程序对其进行了测试-哇，它是如此简单，没有任何麻烦，它可以在大约30分钟内启动并工作。 我使用Linux盒，因为没有适用于Windows的发行版（一个人可以使用cygwin）-我...
在linux中安装HAProxy
最新发布
有趣的灵魂万里挑一,好看的皮囊你又没有
07-09 1239
在linux中安装HAProxy并使用
Linux环境下利用HAProxy实现负载均衡
p12361465的博客
11-30 459
利用HAProxy实现负载均衡
用负载均衡来实现web服务器集群.ppt
11-21
它可以是硬件设备，如专门的负载均衡硬件，也可以是软件，如Nginx、HAProxy等。 2. **服务器集群**：由多台Web服务器组成，它们接收并处理来自负载均衡器的请求。 3. **负载分配算法**：常见的算法包括轮询、最少...
源码安装Haproxy1.8.0详细版
Database operation and maintenance
02-22 2072
源码安装haproxy1.8.0详细版 你好！ 本文将介绍如何在Linux编译源码安装haproxy1.8.0，你也许会遇到同样的问题，如果在ubuntu系统下问题可能会更多， 本文系统环境如下，如果你使用的是CentOS7.2也适用。 软件类型 版本号 Ubuntu Ubuntu 16.04.3 LTS haproxy HA-Proxy version 1.8.0 2017/...
Linux Haproxy Web 集群
Dark_wWw的博客
11-23 384
Linux Haproxy Web 集群 三、Haproxy 搭建 配置环境 haproxy 服务器：192.168.118.140 节点服务器1：192.168.118.150 节点服务器2：192.168.118.160 配置 haproxy 服务器（192.168.118.140） 配置节点 WEB 1 （192.168.118.150） WEB 2 （192.168.118.160） .
HAproxy+keepalived+nginx实验部署
m0_54594153的博客
09-08 2401
而此时，如果后端的服务器宕掉了，但是客户端的cookie是不会刷新的，如果设置此参数，将会将客户的请求强制定向到另外一个后端server上，以保证服务的正常。service haproxy start 或 /etc/init.d/haproxy start //如果ningx服务器未部署会提示找不到web服务器，可以等web部署完后再开启haproxy。state MASTER #服务器角色是master，备份服务器设置为BACKUP。
haproxy 安装
design321的专栏
03-19 647
wget http://haproxy.1wt.eu/download/1.4/src/haproxy-1.4.22.tar.gz tar -zxvf haproxy-1.4.22.tar.gz mv haproxy-1.4.22 haproxy cd haproxy make TARGET=linux26 prefix=/usr/local/haproxy install cd /
Linux中三种SCSI target的介绍之SCST
scaleqiao的专栏
07-04 7572
Linux通用的SCSI 目标子系统(SCST)是一个为Linux SCSI目标子系统的另一种实现，本文主要介绍它的架构和使用
HAProxy安装和配置大全
热门推荐
chengxuyuanyonghu的专栏
03-27 1万+
一、使用说明：  HAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代理，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。  HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理。  HAProxy运行在当前的硬件上，完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中， 同时
5维护网站3
weixin_44516165的博客
02-28 139
解决中文名称不能写数据库的问题 设置utf8字符集 my.cnf character_set_database = utf8 character_set_server = utf8 mysqldump -uroot -paminglinux --default-character-set=utf8 zabbix > zabbix.sql vim zabbix.sql :1,$s/la...
线上TargetVersion改为26后需要适配的东西
chenjk的博客
08-13 372
1、动态权限 ####### 之前打包发布的时候是22，然后上传小米应用市场的时候需要28才可以上传。 ①、需要动态获取的权限有：手机设备信息、通讯录、摄像头、存储读取等比较常见的涉及用户隐私的权限 2.文件存储适配（FileProvider） 1.在AndroidMainfest.xml文件中声明FileProvider <provider android:name="an...
Haproxy使用总结
weixin_34129696的博客
01-17 105
http://blog.csdn.net/mahongming/article/details/6048947 简介 HAProxy是一款提供高可用性、负载均衡以及基于TCP和HTTP应用的代理软件，HAProxy是完全免费的、借助HAProxy可以快速并且可靠的提供基于TCP和HTTP应用的代理解决方案。HAProxy适用于那些负载较大的web站点，这些站点通常又需要会话保持或七层处理。 H...
Haproxy的部署安装
weixin_34235457的博客
03-15 104
Haproxy详解HAProxy: 是法国人Willy Tarreau开发的一个开源软件，是一款应对客户端10000以上的同时连接的高性能的TCP和 HTTP负载均衡器。其功能是用来提供基于cookie的持久性， 基于内容的交换，过载保护的高级流量管制，自动故障切换 ，以正则表达式为基础的标题控制运行时间，基于Web的报表，高级日志记录以帮助排除故障的应用或网络及其他功能。代理正向代理，反向代理...
linux下haproxy安装配置笔记
随便起个不重复的名字
12-22 1494
1.下载 https://fossies.org/linux/misc/legacy/haproxy-1.7.9.tar.gz 2.解压 将安装包上传至home目录下 cd /home tar -zxvf haproxy-1.7.9.tar.gz cd haproxy-1.7.9 3.安装 make TARGET=linux2628 ARCH=x86_64 PREFIX=/usr/
HAProxy与Nginx协作：高性能负载均衡深度解析
本文将详细介绍如何通过HAProxy与Nginx结合实现负载均衡，这是一种在高并发和大规模网站部署中常见的技术组合。首先，我们来了解什么是HAProxy。 HAProxy是一款开源的高性能、开源的负载均衡器和反向代理，专为高...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值