高效多用群集之Haproxy配合Nginx搭建Web集群)

最新推荐文章于 2024-07-24 23:00:08 发布
最新推荐文章于 2024-07-24 23:00:08 发布
阅读量162 收藏
点赞数
文章标签： nginx 前端 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ShiXiao0121/article/details/123035164
版权

高效多用群集之Haproxy配合Nginx搭建Web集群

一、常见的Web集群调度器

  • 目前常见的Web集群调度器分为软件和硬件

  • 软件通常使用开源的LVS、Haproxy、Nginx

    • LVS性能最好，但是搭建相对复杂；
    • Nginx的upstream模块支持集群功能，但是对集群节点健康检查功能不强，高并发没有Haproxy好

  • 硬件一般使用的比较多的是F5，也有很多人使用梭子鱼、绿盟等国内产品

二、Haproxy应用分析

LVS在企业应用中抗负载能力很强，但存在不足

  • LVS不支持正则处理，不能实现动静分离
  • 对于大型网站，LVS的实施配置复杂，维护成功相对较高

Haproxy是一款可提供高可用性、负载均衡、及基于TCP和HTTP应用的代理的软件

  • 适用于负载大的Web站点
  • 运行在硬件上可支持数万计的并发连接的连接请求

三、Haproxy调度算法原理

Haproxy支持多种调度算法，最常用的有三种

  • RR （Round Robin）
    • RR算法是最简单常用的一种算法，即轮询调度
  • LC（Least Connections）
    • 最小连接数算法，根据后端的节点连接数大小动态分配前端请求。
  • SH（Source Hashing）
    • 基于来源访问调度算法，用于一些有Session会话记录在服务器端的场景，可以基于来源的IP、Cookie等做集群调度

四、Haproxy搭建Web群集

实验所需安装包
链接：https://pan.baidu.com/s/1djcdBVrX2-kX2Hhi0F-EmQ
提取码：0121

环境配置

主机操作系统IP地址所需软件/安装包/工具
Haproxy-ServerCentOS7192.168.100.10haproxy-1.5.19.tar.gz
Nginx-Server1CentOS7192.168.100.11nginx-1.12.0.tar.gz
Nginx-Server2CentOS7192.168.100.12nginx-1.12.0.tar.gz
客户端window7102.168.100.13

4.1、编译安装Nginx服务器

详细步骤请看：web服务之Nginx网站服务

Nginx-Server1：192.168.100.11
Nginx-Server2：192.168.100.12

安装Nginx服务可以直接使用脚本安装

#!/bin/bash
#编译安装nginx服务，使用本脚本前请将相应的安装包放入/opt目录下
#安装所需开发包和编译环境、编译器
yum -y install pcre-devel zlib-devel gcc gcc-c++ make
#创建程序用户，便于准确控制访问
useradd -M -s /sbin/nologin nginx

#解压安装包
cd /opt
tar zxvf nginx-1.12.0.tar.gz -C /opt/

#指定安装路径、指定用户名和组名
cd nginx-1.12.0/
./configure --prefix=/usr/local/nginx --user=nginx --group=nginx

#编译及安装
make && make install

#软链接便于系统识别nginx操作命令
ln -s /usr/local/nginx/sbin/nginx /usr/local/sbin/

#添加nginx系统服务
echo '[Unit]
Description=nginx
After=network.target
[Service]
Type=forking
PIDFile=/usr/local/nginx/logs/nginx.pid
ExecStart=/usr/local/nginx/sbin/nginx
ExecrReload=/bin/kill -s HUP $MAINPID
ExecrStop=/bin/kill -s QUIT $MAINPID
PrivateTmp=true
[Install]
WantedBy=multi-user.target' > /lib/systemd/system/nginx.service

#赋权及开启服务、开启开机自启
chmod 754 /lib/systemd/system/nginx.service
systemctl start nginx.service
systemctl enable nginx.service

在这里插入图片描述

注：
在这里插入图片描述

Nginx-Server1:192.168.100.11

echo "this is 192.168.100.11 web" > /usr/local/nginx/html/test.html

在这里插入图片描述

Nginx-Server2:192.168.100.12

echo "this is 192.168.100.12 web" > /usr/local/nginx/html/test.html

在这里插入图片描述

4.2、部署Haproxy服务器

Haproxy-Server：192.168.100.10

1)、关闭防火墙，将所需软件包放到/opt目录下

systemctl stop firewalld
setenforce 0

cd /opt
haproxy-1.5.19.tar.gz

在这里插入图片描述

2)、编译安装Haproxy

yum install -y pcre-devel bzip2-devel gcc gcc-c++ make

tar zxvf haproxy-1.5.19.tar.gz
cd haproxy-1.5.19/
make TARGET=linux2628 ARCH=x86_64
make install

参数说明
#使用uname -r查看内核，如：2.6.18-371.el5，此时该参数用TARGET=linux26；kernel大于2.6.28的用TARGET=linux2628
TARGET=linux26	#内核版本
ARCH=x86_64 	#系统位数，64位系统

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

3)、Haproxy服务器配置

mkdir /etc/haproxy
cp examples/haproxy.cfg /etc/haproxy/

cd /etc/haproxy/
vim haproxy.cfg
global
  #4~5行–修改，配置日志记录，local0为日志设备，默认存放到系统日志3
  log /dev/log   local0 info		
  log /dev/log   local0 notice
  #log loghost    local0 info
  maxconn 4096   #最大连接数，需考虑ulimit-n限制
  
  #8行–注释，chroot运行路径，为该服务自设置的根目录，一般需将此行注释掉
  #chroot /usr/share/haproxy
  uid 99    #用户UID
  gid 99    #用户GID
  daemon    #守护进程模式

defaults        
  log     global      #定义日志为global配置中的日志定义
  mode    http	      #模式为http
  option  httplog     #采用http日志格式记录日志
  option  dontlognull #不记录健康检查日志信息
  retries 3           #检查节点服务器失败次数，连续达到三次失败，则认为节点不可用
  redispatch				    #当服务器负载很高时，自动结束当前队列处理比较久的连接
  maxconn 2000					#最大连接数
  contimeout      5000			#连接超时时间
  clitimeout      50000			#客户端超时时间
  srvtimeout      50000			#服务器超时时间

#删除下面所有listen项–，添加
listen  webcluster 0.0.0.0:80		
    option httpchk GET /test.html	#检查服务器的test.html文件
    balance roundrobin				#负载均衡调度算法使用轮询算法roundrobin
    server inst1 192.168.100.11:80 check inter 2000 fall 3		#定义在线节点
    server inst2 192.168.100.12:80 check inter 2000 fall 3

#--参数说明----------------
balance roundrobin   #负载均衡调度算法
#轮询算法: roundrobin;最小连接数算法: leastconn;来源访问调度算法: source，类似于nginx的ip_hash

check inter 2000 #表示haproxy服务器和节点之间的一个心跳频率
fall 3   #表示连续三次检测不到心跳频率则认为该节点失效
若节点配置后带有""backup"表示该节点只是个备份节点，只有主节点失效该节点才会上。不携带"backup"，表示为主节点，和其它主节点共同提供服务。

在这里插入图片描述
在这里插入图片描述

4)、添加Haproxy系统服务

（如果你先做Haproxy服务器，这步需要等到Nginx服务器搭建好再去做，不然会启动失败）

cp /opt/haproxy-1.5.19/examples/haproxy.init /etc/init.d/haproxy
cd /etc/init.d/
ll
chmod +x haproxy
chkconfig --add /etc/init.d/haproxy
ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy
service haproxy start

在这里插入图片描述

4.3、测试Web集群

在客户端使用浏览器打开 http://192.168.100.10/test.html ，不断刷新浏览器测试负载均衡效果

在这里插入图片描述
在这里插入图片描述

ShiXiao0121
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
[转]高负载并发网站架构分析
bluehire的专栏
12-23 2万+
由于自己正在做一个高性能大用户量的论坛程序，对高性能高并发服务器架构比较感兴趣，于是在网上收集了不少这方面的资料和大家分享。希望能和大家交流 msn: defender_ios@hotmail.com ——————————————————————————————————————— ? 初创网站与开源软件 6 ? 谈谈大型高负载网站服务器的优化心得! 8 ? Lighttpd+Squid+Apach
高效多用的群集之Haproxy配合Nginx搭建Web集群
Xt991124的博客
03-15 520
目录 一、常见的Web集群调度器 二、Haproxy应用分析 三、Haproxy调度算法原理 四、Haproxy搭建 Web 群集 1、编译安装Nginx服务器 2、部署haproxy服务器 3、测试 Web集群 五、日志定义 六、Haproxy参数优化 一、常见的Web集群调度器 目前常见的Web集群调度器分为软件和硬件 软件通常使用开源的LVS、Haproxy、Nginx LVS性能最好，但是搭建相对复杂； Nginx的upstream模块支持集群功能，但是对集群节点健康检
高效多用的群集之Haproxy加Nginx搭建web集群
weixin_62452835的博客
02-17 112
一、常见的Web集群调度器 目前常见的Web集群调度器分为软件和硬件 软件通常使用开源的LVS、Haproxy、Nginx * LVS性能最好，但是搭建相对复杂 * Nginx的upstream模块支持集群功能，但是对集群节点健康检查功能不强，高并发没有Haproxy好 硬件一般使用的比较多的是F5，也有很多人使用梭子鱼、绿盟等国内产品 二、Haproxy应用分析 LVS在企业应用中抗负载能力很强，但存在不足 * LVS不支持正则处理，不能实现动静分离 * 对于大型网站，LVS的实施配置复杂，维护成功
高效多用的群集-Haproxy搭建Web集群
weixin_64413763的博客
10-24 117
默认haproxy的日志是输出到系统的syslog中，查看起来不是非常方便，为了更好的管理haproxy的日志，我们在生产环境中一般单独定义出来。需要将haproxy的info及notice日志分别记录到不同的日志文件中。global需要修改rsyslog配置，为了便于管理。将haproxy相关的配置独立定义到haproxy.conf，并放到/etc/rsyslog.d/下，rsyslog启动时会自动加载此目录下的所有配置文件。
Linux中级之负载均衡（lvs,nginx,haproxy）、中间件
weixin_30666943的博客
08-20 154
一、负载均衡的概念 1、系统的扩展方式： scale up：向上扩展 scale out：向外扩展 2、集群类型： LB（Load Balancing）、HA（highavailability） 3、LB集群的实现 硬件：F5、Redware 软件：lvs、haproxy、nginx ...
简单理解集群、分布式和负载均衡的概念
弱弱的猿
03-03 1万+
集群概念集群通信系统是一种用于集团调度指挥通信的移动通信系统，主要应用在专业移动通信领域。该系统具有的可用信道可为系统的全体用户共用，具有自动选择信道功能，它是共享资源、分担费用、共用信道设备及服务的多用途、高效能的无线调度通信系统。是指一组独立的计算机系统构成的一个松耦合的多处理器系统，它们之间通过网络实现进程间的通信。应用程序可以通过网络共享内存进行消息传送，实现分布式计算机。通俗一点来说，就...
Linux面试题汇总1
五更天长的博客
09-21 350
关系型数据库有：MySQL、SQLserver、Oracle、MariaDB非关系型数据库有：Redis、MongoDB、HBase、Memcached关系型数据库最典型的数据结构是表，由二维表及其之间的联系所组成的一个数据组织。优点：1、易于维护：都是使用表结构，格式一致；2、使用方便：支持SQL语言通用，使用方便；3、复杂操作：可用于一个表以及多个表之间非常复杂的查询。缺点：1、读写性能比较差，尤其是海量数据的高效率读写；2、固定的表结构，灵活度稍欠；
大数据最佳实践-hive
program哲学
04-21 1248
目录小文件问题 小文件问题 一、哪里会产生小文件 ? 源数据本身有很多小文件 动态分区会产生大量小文件 reduce个数越多, 小文件越多 按分区插入数据的时候会产生大量的小文件, 文件个数 = maptask个数 * 分区数 二、影响 从Hive的角度看，小文件会开很多map，一个map开一个JVM去执行，所以这些任务的初始化，启动，执行会浪费大量的资源，严重影响性能。 HDFS存储太多小文件, 会导致namenode元数据特别大, 占用太多内存, 制约了集群的扩展。 三、解决方法 方法一：通过调整参数进
高负载高并发网站架构分析
热门推荐
Steven_ssm的博客
08-28 3万+
由于自己正在做一个高性能大用户量的论坛程序，对高性能高并发服务器架构比较感兴趣，于是在网上收集了不少这方面的资料和大家分享。希望能和大家交流  msn: defender_ios@hotmail.com  ———————————————————————————————————————   初创网站与开源软件 6   谈谈大型高负载网站服务器的优化心得! 8   Lighttpd+S
第四章 haproxy搭建web群集
06-15
haproxy/nginx/tomcat
haproxy-wi：用于管理Haproxy，Nginx和Keepalived服务器的Web界面
02-05
Web界面（用户友好的Web GUI，警报，监视和安全），用于管理HAProxy，Nginx和Keepalived服务器。 留下您的 参与其中 ，订阅！ 关于HAProxy-WI的，欢迎进行讨论和提问 示范现场 登录名/密码：admin / admin。 ...
haproxy+nginx+tomcat 练习1
08-08
在本实验中，我们将搭建一个基于CentOS 7.4的高可用性负载均衡系统，该系统使用Haproxy作为负载均衡器，Nginx作为反向代理服务器，以及两个Tomcat实例作为应用服务器。这样的架构可以提高服务的稳定性和响应速度，...
keepalived+haproxy+nginx-脚本
04-29
标题中的"keepalived+haproxy+nginx-脚本"指的是一个集成的高可用性和...总之，"keepalived+haproxy+nginx-脚本"提供了一个完整的高可用性和负载均衡解决方案，适用于需要稳定、高效且能应对服务器故障的Web服务场景。
ASP.NET Web Api 使用 EF 6，DateTime 字段如何取数据库服务器当前时间
最新发布
yangshuquan的专栏
07-24 774
在做数据库设计时，为了方便进行数据追踪，通常会有几个字段是每个表都有的，比如创建时间、创建人、更新时间、更新人等，这些时间字段一般存储的是数据库服务器的时间，EF 是操作整个数据表对象，所以需要寻找方法来实现这个目的。本文分享 DB First 和 Code First 两种模式的 EF 中 DateTime 字段如何存储数据库服务器当前时间的方法。
Vue使用FullCalendar实现日历/周历/月历
_小郑有点困了的博客
07-23 308
需求背景：项目上遇到新需求，要求实现工单以日/周/月历形式展示。而且要求不同工单根据状态显示不同颜色，一个工单内部，需要以不同颜色显示三个阶段。
TS如何处理js模块的类型？
闻人放歌的三寸青草园圃
07-24 247
【代码】TS如何处理js模块的类型？
VUE 子组件可以直接改变父组件的数据吗
Cshaosun的博客
07-23 308
如果子组件需要修改父组件的数据，‌应该通过触发一个自定义事件来通知父组件进行数据的变更。‌父组件在接收到子组件触发的事件后，‌可以修改数据，‌从而间接地改变父组件的数据。‌这种方式通过明确的事件通信机制，‌保证了数据流的单向性和组件之间的解耦。需要注意的是，‌虽然Vue提供了一些特殊的方法来实现子组件修改父组件数据，‌但这种方式打破了数据流的单向性，‌增加了组件之间的耦合性，‌因此应谨慎使用。在Vue中，‌如果确实需要在子组件中修改父组件的数据，‌可以通过以下步骤实现：‌。
Haproxy+Nginx+Tomcat：动静页面分离与高可用集群搭建
文章还涵盖了Haproxy配置文件的解析和高可用集群的搭建案例。" Haproxy是一个强大的开源负载均衡器，它主要负责在服务器之间分发网络或应用程序流量。Haproxy以其高效性能、非阻塞架构和事件驱动设计而闻名，尤其...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值