运维实战 负载均衡Nginx

最新推荐文章于 2024-04-07 22:08:54 发布
最新推荐文章于 2024-04-07 22:08:54 发布
阅读量197 收藏
点赞数 2
分类专栏： 运维实战 企业架构
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lunarlibrary/article/details/115474519
版权

运维实战 负载均衡Nginx


Nginx是一个高性能的 HTTP和 反向代理web服务器，同时也提供了IMAP/POP3/SMTP服务,这里用来做负载均衡器,业务中也用来作CDN.

由于其同时具有商业版和社区版,这里我使用社区版.(同时也因为其开源特性有很多衍生版本,比如阿里经过大量修改和自需求优化后的版本叫做Tengine)

前期准备

由于之前进行过HAProxy的高可用和Fence搭建,因此请先格式化虚拟机或关闭集群,保证Server1不受之前的实验环境干扰.

  • Nginx使用源码编译安装因此需要提前安装编译所需的C语言编译器.
yum install -y gcc
  • 了解编译所需时间与软件源码大小以及机器CPU性能有关.
  • 在配置过程中可能会出现error,根据提示补全所需的依赖后重新配置即可.
  • 所需以来的软件包名通常为名称-devel,可以进行优先尝试.(如缺少Openssl则先尝试安装openssl-devel进行解决).
  • configure时可以按需增加参数,支持的参数可以通过--help查看.

安装流程

##安装流程,省略部分安装过程滚动信息.
[root@Server1 mnt]# ls
nginx-1.18.0.tar.gz
[root@Server1 mnt]# tar zxf nginx-1.18.0.tar.gz 
[root@Server1 mnt]# cd nginx-1.18.0/
[root@Server1 nginx-1.18.0]# ls
auto     CHANGES.ru  configure  html     man     src
CHANGES  conf        contrib    LICENSE  README

[root@Server1 nginx-1.18.0]# ./configure --prefix=/usr/local/nginx --with-http_ssl_module --with-http_stub_status_module
./configure: error: the HTTP rewrite module requires the PCRE library.
You can either disable the module by using --without-http_rewrite_module
option, or install the PCRE library into the system, or build the PCRE library
statically from the source with nginx by using --with-pcre=<path> option.

##缺少PCRE依赖,进行安装##
[root@Server1 nginx-1.18.0]# yum install -y pcre-devel

[root@Server1 nginx-1.18.0]# ./configure --prefix=/usr/local/nginx --with-http_ssl_module --with-http_stub_status_module
./configure: error: SSL modules require the OpenSSL library.
You can either do not enable the modules, or install the OpenSSL library
into the system, or build the OpenSSL library statically from the source
with nginx by using --with-openssl=<path> option.

##缺少Openssl依赖,进行安装##
[root@Server1 nginx-1.18.0]# yum install -y openssl-devel

##正确配置
[root@Server1 nginx-1.18.0]# ./configure --prefix=/usr/local/nginx --with-http_ssl_module --with-http_stub_status_module

##可以看到出现了编译所需的文件Makefile
[root@Server1 nginx-1.18.0]# ls
auto     CHANGES.ru  configure  html     Makefile  objs    src
CHANGES  conf        contrib    LICENSE  man       README
##编译并安装
[root@Server1 nginx-1.18.0]# make
[root@Server1 nginx-1.18.0]# make install

##编译安装到此结束,下文均为安装后目录中操作
##与解压目录无关
[root@Server1 nginx-1.18.0]# cd /usr/local/nginx/

##配置环境变量路径并刷新激活
[root@Server1 sbin]# vim ~/.bash_profile 
[root@Server1 sbin]# source ~/.bash_profile 

##尝试启动nginx,可以看到其运行在80端口
[root@Server1 sbin]# nginx 
[root@Server1 sbin]# netstat -antlp
Active Internet connections (servers and established)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    
tcp        0      0 0.0.0.0:80              0.0.0.0:*               LISTEN      9021/nginx: master  
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      3221/sshd           
tcp        0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      3391/master         
tcp        0      0 172.25.5.1:22           172.25.5.250:47860      ESTABLISHED 3642/sshd: root@pts 
tcp6       0      0 :::22                   :::*                    LISTEN      3221/sshd           
tcp6       0      0 ::1:25                  :::*                    LISTEN      3391/master

##向nginx发送停止命令,相当于stop
[root@Server1 sbin]# nginx -s stop
  • 通过ps aux可以看到nginx运行后出现两个新进程.
##进程号不一定一致
 9021 ?        Ss     0:00 nginx: master process nginx
 9022 ?        S      0:00 nginx: worker process

修改主配置文件

  • Nginx默认没有设置用户因此如果按照默认配置运行则进程用户为nobody,这是我们不想看到的.
  • 修改Nginx的进程数和句柄数来提高性能.
  • 与HAProxy中的逻辑相同,更改应用的句柄数后一样要更改系统的.
  • 在主配置文件的http服务设置部分设置upstream来实现负载均衡,后续的模块相关设置也在这里.
  • 在主配置文件的http服务设置部分设置server.
  • nginx -t检测语法.
  • nginx -s reload重载配置.
##添加供Nginx使用的用户,设置不可用于登录,不自动创建家目录且手动制定家目录
[root@Server1 conf]# useradd -M -d /usr/local/nginx/ -s /sbin/nologin nginx
[root@Server1 conf]# id nginx
uid=1001(nginx) gid=1001(nginx) groups=1001(nginx)

##配置nginx相关用户设置并重载
##可以看到进程的用户变为nginx
[root@Server1 conf]# vim nginx.conf
[root@Server1 conf]# nginx -s reload
[root@Server1 conf]# ps aux
nginx     9080  0.0  0.1  46420  2024 ?        S    10:19   0:00 nginx: worker p

##尝试使用curl访问,可以看到调度
[root@foundation5 mnt]# curl www.westos.org
Server3
[root@foundation5 mnt]# curl www.westos.org
Server2
[root@foundation5 mnt]# curl www.westos.org
Server3

##使用Apache功能进行并发测试,10个用户总共5000条请求.
[root@foundation5 mnt]# ab -c10 -n5000 http://www.westos.org/index.html
This is ApacheBench, Version 2.3 <$Revision: 1843412 $>
Copyright 1996 Adam Twiss, Zeus Technology Ltd, http://www.zeustech.net/
Licensed to The Apache Software Foundation, http://www.apache.org/

Benchmarking www.westos.org (be patient)
Completed 500 requests
Completed 1000 requests
Completed 1500 requests
Completed 2000 requests
Completed 2500 requests
Completed 3000 requests
Completed 3500 requests
Completed 4000 requests
Completed 4500 requests
Completed 5000 requests
Finished 5000 requests


Server Software:        nginx/1.18.0
Server Hostname:        www.westos.org
Server Port:            80

Document Path:          /index.html
Document Length:        8 bytes

Concurrency Level:      10
Time taken for tests:   1.996 seconds
Complete requests:      5000
Failed requests:        0
Total transferred:      1285000 bytes
HTML transferred:       40000 bytes
Requests per second:    2504.81 [#/sec] (mean)
Time per request:       3.992 [ms] (mean)
Time per request:       0.399 [ms] (mean, across all concurrent requests)
Transfer rate:          628.65 [Kbytes/sec] received

Connection Times (ms)
              min  mean[+/-sd] median   max
Connect:        0    0   0.4      0       3
Processing:     1    3   1.2      3      15
Waiting:        1    3   1.1      3      15
Total:          1    4   1.2      4      16

Percentage of the requests served within a certain time (ms)
  50%      4
  66%      4
  75%      4
  80%      5
  90%      5
  95%      6
  98%      7
  99%      8
 100%     16 (longest request)
  • 修改过后的nginx.conf内容

user  nginx nginx;
worker_processes  2;
worker_cpu_affinity 01 10;

#error_log  logs/error.log;
#error_log  logs/error.log  notice;
#error_log  logs/error.log  info;

#pid        logs/nginx.pid;


events {
    worker_connections  65535;
}


http {
    upstream Test{
    server 172.25.5.2:80;
    server 172.25.5.3:80;
    }
    include       mime.types;
    default_type  application/octet-stream;

    #log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
    #                  '$status $body_bytes_sent "$http_referer" '
    #                  '"$http_user_agent" "$http_x_forwarded_for"';

    #access_log  logs/access.log  main;

    sendfile        on;
    #tcp_nopush     on;

    #keepalive_timeout  0;
    keepalive_timeout  65;

    #gzip  on;

    server {
        listen       80;
        server_name  localhost;

        #charset koi8-r;

        #access_log  logs/host.access.log  main;

        location / {
            root   html;
            index  index.html index.htm;
        }

        #error_page  404              /404.html;

        # redirect server error pages to the static page /50x.html
        #
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;
        }

        # proxy the PHP scripts to Apache listening on 127.0.0.1:80
        #
        #location ~ \.php$ {
        #    proxy_pass   http://127.0.0.1;
        #}

        # pass the PHP scripts to FastCGI server listening on 127.0.0.1:9000
        #
        #location ~ \.php$ {
        #    root           html;
        #    fastcgi_pass   127.0.0.1:9000;
        #    fastcgi_index  index.php;
        #    fastcgi_param  SCRIPT_FILENAME  /scripts$fastcgi_script_name;
        #    include        fastcgi_params;
        #}

        # deny access to .htaccess files, if Apache's document root
        # concurs with nginx's one
        #
        #location ~ /\.ht {
        #    deny  all;
        #}
    }


    # another virtual host using mix of IP-, name-, and port-based configuration
    #
    #server {
    #    listen       8000;
    #    listen       somename:8080;
    #    server_name  somename  alias  another.alias;

    #    location / {
    #        root   html;
    #        index  index.html index.htm;
    #    }
    #}


    # HTTPS server
    #
    #server {
    #    listen       443 ssl;
    #    server_name  localhost;

    #    ssl_certificate      cert.pem;
    #    ssl_certificate_key  cert.key;

    #    ssl_session_cache    shared:SSL:1m;
    #    ssl_session_timeout  5m;

    #    ssl_ciphers  HIGH:!aNULL:!MD5;
    #    ssl_prefer_server_ciphers  on;

    #    location / {
    #        root   html;
    #        index  index.html index.htm;
    #    }
    #}

server {
	listen 80;
	server_name www.westos.org;

	location / {
	proxy_pass http://Test;
	}
}
}


vim /etc/security/limit.conf

# End of file
nginx		 - 	 nofile		 65535

基于Cookies的会话保持

由于sticky cookies模式只有商业付费版本的Nginx Plus才能使用,这里使用第三方模块nginx-goodies-nginx-sticky-module来进行基于cookies的会话保持.

需求场景

请求经过类似CDN之类的反向代理后,对后端RealServer的请求IP变更为反响代理服务器的IP.

如果使用基于IP的哈希验证,则相当于根本没有做负载均衡.

而基于Cookies进行验证则不会出现这个问题.

##解压第三方模块并在配置/编译时加入
[root@Server1 mnt]# unzip nginx-goodies-nginx-sticky-module-ng-08a395c66e42.zip
[root@Server1 nginx-1.18.0]# ./configure --prefix=/usr/local/nginx --with-http_ssl_module --with-http_stub_status_module --add-module=/mnt/nginx-goodies-nginx-sticky-module-ng-08a395c66e42

对Nginx主配置中的服务部分引入cookies模块并重载配置.


user  nginx nginx;
worker_processes  auto;

#error_log  logs/error.log;
#error_log  logs/error.log  notice;
#error_log  logs/error.log  info;

#pid        logs/nginx.pid;


events {
    worker_connections  65535;
}


http {
    upstream Test {
    	sticky;
    	server 172.25.5.2:80;
    	server 172.25.5.3:80;
    }
    include       mime.types;
    default_type  application/octet-stream;

    #log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
    #                  '$status $body_bytes_sent "$http_referer" '
    #                  '"$http_user_agent" "$http_x_forwarded_for"';

    #access_log  logs/access.log  main;

    sendfile        on;
    #tcp_nopush     on;

    #keepalive_timeout  0;
    keepalive_timeout  65;

    #gzip  on;

    server {
        listen       80;
        server_name  localhost;

        #charset koi8-r;

        #access_log  logs/host.access.log  main;

        location / {
            root   html;
            index  index.html index.htm;
        }

        #error_page  404              /404.html;

        # redirect server error pages to the static page /50x.html
        #
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;
        }

        # proxy the PHP scripts to Apache listening on 127.0.0.1:80
        #
        #location ~ \.php$ {
        #    proxy_pass   http://127.0.0.1;
        #}

        # pass the PHP scripts to FastCGI server listening on 127.0.0.1:9000
        #
        #location ~ \.php$ {
        #    root           html;
        #    fastcgi_pass   127.0.0.1:9000;
        #    fastcgi_index  index.php;
        #    fastcgi_param  SCRIPT_FILENAME  /scripts$fastcgi_script_name;
        #    include        fastcgi_params;
        #}

        # deny access to .htaccess files, if Apache's document root
        # concurs with nginx's one
        #
        #location ~ /\.ht {
        #    deny  all;
        #}
    }


    # another virtual host using mix of IP-, name-, and port-based configuration
    #
    #server {
    #    listen       8000;
    #    listen       somename:8080;
    #    server_name  somename  alias  another.alias;

    #    location / {
    #        root   html;
    #        index  index.html index.htm;
    #    }
    #}


    # HTTPS server
    #
    #server {
    #    listen       443 ssl;
    #    server_name  localhost;

    #    ssl_certificate      cert.pem;
    #    ssl_certificate_key  cert.key;

    #    ssl_session_cache    shared:SSL:1m;
    #    ssl_session_timeout  5m;

    #    ssl_ciphers  HIGH:!aNULL:!MD5;
    #    ssl_prefer_server_ciphers  on;

    #    location / {
    #        root   html;
    #        index  index.html index.htm;
    #    }
    #}

	server {
    	listen 80;
    	server_name www.westos.org;

    	location / {
    	proxy_pass http://Test;
    	}
	}
}

分别使用curl和浏览器对www.wesos.org进行访问.

  • 由于curl没有cookies功能所以以就可以实现轮转
  • 而浏览器由于有cookies所以会始终保持第一次访问的RS
[root@foundation5 nginx-1.18.0]# curl www.westos.org
Server2
[root@foundation5 nginx-1.18.0]# curl www.westos.org
Server2
[root@foundation5 nginx-1.18.0]# curl www.westos.org
Server3
[root@foundation5 nginx-1.18.0]# curl www.westos.org
Server2
洛冰音
关注
  • 2
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
实战Nginx-PDF版.zip
07-17
主要内容包括：第1章 Nginx简介；第2章Nginx服务器安装与配置；...第6章Nginx http负载均衡和反向代理；第7章Nginx 的rewrite规则与实例；第8章 Nginx 模块开发；第9章Nginx 的web缓存服务与新浪网的开源NCACHE模块等
企业级Nginx负载均衡与keepalived高可用实战
10-25
互联网环境最常用nginx负载均衡技术 企业级实战基于nginx1.6.2+keepalived-1.2.16最新稳定版讲解 原理与实践并重！国内运维架构大师老男孩讲解，深入浅出。 老男孩linux培训首发，老男孩老师主讲。本课程面向linux...
Java必备技能之环境搭建篇 (linux ab压力测试)
最新发布
m0_61041374的博客
04-07 984
为了做好运维面试路上的助攻手，特整理了上百道。
压力测试工具 Apache Benchmark (ab)
yunxixiao的博客
06-25 664
Apache Benchmark 官网地址http://httpd.apache.org/docs/2.4/programs/ab.html 未 完 学习笔记，仅供参考！如有侵权，请联系删除
超实用压力测试工具-ab工具
热门推荐
yhlas的博客
06-06 2万+
超实用压力测试工具-ab工具在学习AB工具之前，我们需了解几个关于压力测试的概念吞吐率（Requests per second）概念：服务器并发处理能力的量化描述，单位是reqs / s，指的是某个并发用户数下单位时间内处理的请求数。某个并发用户数下单位时间内能处理的最大请求数，称之为最大吞吐率。计算公式：总请求数/处理完成这些请求数所花费的时间，即每秒请求数=完成请求数/测试时间并发连接数（并发...
使用ab进行页面的压力测试
weixin_33816300的博客
05-24 171
ab是apache自带的一个很好用的压力测试工具，当安装完apache的时候，就可以在bin下面找到ab   1 我们可以模拟100个并发用户，对一个页面发送1000个请求 ./ab -n1000 -c100 http://vm1.jianfeng.com/a.html   其中-n代表请求数，-c代表并发数   返回结果: ##首先是apache的版本信息 This is A...
企业级keepalived高可用实战与Nginx负载均衡视频教程.zip
01-21
企业级keepalived高可用实战与Nginx负载均衡视频教程.zip
百度、京东、阿里巴巴大牛力荐 Linux企业运维实战
01-07
主要内容包括最新版Linux系统安装的完整过程、系统启动原理、系统必备的命令...Nginx性能调优、自动化运维技术实战、shell编程入门、shell编程企业实战案例剖析、shell编程企业案例详解、Puppet、Ansible案例深入剖析、...
誉天邹老师运维系列教程之二-Nginx网站架构实战视频
07-23
教程名称：誉天邹老师运维系列教程之二-Nginx网站架构实战视频课程目录：【】01-Nginx架构及安装【】02-Nginx虚拟主机及相关配置【】03-Nginx地址重写【】04-Nginx日志管理和限速【】05-Nginx反向代理和负载均衡 ...
使用ab对Tomcat8.5进行压力测试
程序员大阳
09-28 2142
背景 一直不是很清楚tomcat能力大约是个什么水平，到底算不算web服务器中的高手，今天决定试试这家伙的深浅。 恰好了解到apache自带的ab(apache benchmark)工具可以进行简单的压力测试，所以就用它来试试。 流程 先配置tomcat8.5，然后随便扔一个静态网页到tomcat上运行。 然后下载ab。 然后使用ab进行初步压力测试。 最后使用ab对网易和本机tomcat对比测试...
高并发之——并发测试工具ab
冰河的专栏
10-23 3663
工具使用示例如下： ab -n 1000 -c 50 http://localhost:8080/test 命令说明如下： ab：ab命令； n：总请求次数； c：并发数 运行示例如下： [root@localhost] ab -n 1000 -c 50 http://localhost:8080/test This is ApacheBench, Version 2.3 &lt...
apache ab测试介绍
weixin_33724059的博客
05-23 69
2019独角兽企业重金招聘Python工程师标准>>> ...
使用Apache的ab工具进行压力测试
Chaixiaotao的专栏
04-09 187
Apache附带的ab工具（本机使用的PHP环境是WAMP集成环境，ab工具位于D:\wamp\bin\apache\Apache2.2.21\bin）非常容易使用，ab可以直接在Web服务器本地发起测试请求，这至关重要，因为有些时候我们需要测试的仅仅是服务器的处理性能，并不想掺杂着网络传输时间的影响。ab进行一切测试的本质都是基于HTTP的，所以可以说ab对于Web服务器软件的黑盒性能测试，获得
linux压力测试工具ab
ABC程序人生的专栏
12-29 563
https://www.cnblogs.com/yueminghai/p/6412254.html 举例 ab -c 10 -n 100 http://a.ilanni.com/index.php    具体的参数使用就不一一介绍了，本文主要说明-n -c  -T -p -H 参数，这几个是在进行带多个header信息的post请求压力测试中要用到的。 -n  指定请求数   如 -n1...
ab压力测试工具详解
IT_10的博客
04-09 3798
安装 yum install httpd-tools ab命令及其参数 ab -n 2000 -c 2 你的url -n ：总的请求数 -c ：并发数 -k 是否开启长连接 测试静态接口1 Time taken for tests：发费的总时间 Requests per second：每秒请求数（总请求数除总时间） 上面的Time per request：对于客户端而言，单个请求所用的时间 ...
Ubuntu install of ROS Lunar
大坑之路
03-31 599
官网安装ros lunar的手册流程版，备用。Ubuntu 16.041、设置-软件和更新-可从互联网下载-（勾选）除了源代码外的所有选项。2、执行sudo sh -c 'echo "deb http://packages.ros.org/ros/ubuntu $(lsb_release -sc) main" &gt; /etc/apt/sources.list.d/ros-latest.list...
一本书带你吃透Nginx应用与运维
华章IT官方博客
09-01 1454
新书速递导读：Nginx作为一款优秀的开源Web服务器软件，因具有性能稳定、高并发能力强、资源耗用低及高性能的负载均衡等特点，被众多互联网公司广泛应用于实际生产项目中。因此，它也成为每个...
负载均衡 nginx.conf 多域名
05-18
在 Nginx 中实现多域名的负载均衡可以通过如下配置： ``` http { upstream backend { server backend1.example.com; server backend2.example.com; } server { listen 80; server_name example....

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值