7.Nginx性能调优与深度监控

一.Nginx性能调优

1.修改用户与组

Nginx运行时进程需要有用户与组的支持,用以实现对网站文件读取时进行访问控制。主进程由root创建,子进程由指定的用户与组创建。Nginx默认使用nobody用户账号与组账号,一般也要进行修改。修改Nginx用户与组有两种方法,一种是在编译安装时指定用户与组,另一种是修改配置文件指定用户与组。

编译Nginx时指定用户与组,就是配置Nginx时,在./configure后面指定用户与组的参数

命令:./configure --prefix=/usr/local/nginx  --user=nginx  --group=nginx

修改Nginx配置文件nginx.conf指定用户与组

命令:vi /usr/local/nginx/conf/nginx.conf

user  nginx  nginx;         (修改用户为nginx,组为nginx)

2.更改进程数与连接数

(1)进程数

在高并发环境中,需要启动更多的nginx进程以保证快速响应,用以处理用户的请求,避免造成堵塞。使用ps aux命令查看nginx运行进程的个数。从命令执行结果可以看出master process是nginx的主进程,开启1个;worker process是子进程,子进程也是开启了1个。修改nginx的配置文件的worker_processes参数,一般设为CPU的个数或者核数,在高并发的情况下可设置为CPU个数或核数的2倍,可以查看CPU的核数以确认参数

参数设置为2,和CPU的核数相同。运行进程数多一些,响应客户端访问请求时,nginx就不会临时启动新的进程提供服务,减少了系统的开销,提升了服务速度

命令:vi /usr/local/nginx/conf/nginx.conf

worker_processes  2;

修改完后,使用ps aux查看进程数变化情况。可以发现开启了一个主进程和2个子进程

默认情况下。Nginx的多进程可能更多的跑在一颗CPU上。为了充分利用硬件多核多CPU,可以分配不同的进程给不同的CPU处理。在一台4核CPU服务器上,可以设置每个进程分别由不同的CPU核心处理,达到CPU的性能最大化

命令:vi /usr/local/nginx/conf/nginx.conf

worker_processes  4;

worker_cpu_affinity  0001  0010  0100  1000;

(2)连接数

单个worker进程最大并发连接数

命令:vi /usr/local/nginx/conf/nginx.conf

所以nginx的总并发数计算:总并发数=worker_processes  ×  worker_connections

3.静态缓存功能设置

当nginx将网页数据返回给客户端后,可设置缓存时间,以便在日后进行相同内容的请求时直接返回,以避免重复请求,加快访问速度。缓存时间一般针对静态资源进行设置,对动态网页不用设置缓存时间

(1)设置静态资源缓存

命令:vi /usr/local/nginx/conf/nginx.conf

           nginx -t

           nginx -s reload

(2)验证静态缓存

通过浏览器查看,响应头中包含字段即为缓存成功

4.设置连接超时

在企业网站中,为了避免同一个客户长时间占用连接,造成资源浪费,可设置响应的连接超时参数,实现控制连接访问时间。可以修改配置文件nginx.conf,设置keepalive_timeout超时时间

命令:vi /usr/local/nginx/conf/nginx.conf

http  {

......

#keepalive_timeout 0;

keepalive_time 65 180;                        (默认是65秒,设置超时是180秒)

5.日志切割

随着nginx运行时间的增加,产生的日志也会逐渐增加,为了方便掌握nginx的运行状态,需要时刻关注nginx日志文件。太大的日志文件对监控是一个大灾难,不便于分析排查,需要定期的进行日志文件的切割

nginx没有类似apache的cronlog日志分割处理功能,但是可以通过nginx的信号控制功能脚本来实现日志的自动切割,并将脚本加入到Linux的计划任务中,让脚本在每天的固定时间实现日志切割功能

(1)编写脚本

/opt/fenge.sh,把nginx的日志文件/usr/local/nginx/logs/access.log移动到目录/var/log/nginx下面,以当前时间作为日志文件的名称,然后用kill -USER1创建新的日志文件/usr/local/nginx/logs/access.log,最后删除30天之前的日志文件

命令:vi  /opt/fenge.sh

标题

最后四行分别表示:

创建日志文件记录

移动并重命名日志文件

重建新日志文件

删除30天之前的日志文件

(2)执行/opt/fenge.sh,测试文件是否被切割

命令:chmod  +x  /opt/fenge.sh

           /opt/fenge.sh

           ls  /var/log/nginx

           ls  /usr/local/nginx/logs/access.log

设置crontab任务,定期执行脚本自动进行日志分割

命令:crontab  -e

30  1  *  *  *  /opt/fenge.sh                  (每天凌晨1:30分执行脚本,进行日志分割)

6.配置网页压缩

nginx的ngx_http_gzip_module压缩模块提供了对文件内容压缩的功能,允许nginx服务器将输出内容发送到客户端之前进行压缩,以节约网站的带宽,提升用户的访问体验。

压缩功能参数:

gzipon:开启gzip压缩输出

gzip_min_length1k:用于设置允许压缩的页面最小字节数

gzip_buffers  4  16k:表示申请4个单位为16k的内存作为压缩结果流缓存,默认值是申请与原始数据大小相同的内存空间来缓存gzip压缩结果

gzip_comp_level  2:用来指定gzip压缩比,1压缩比最小,处理速度最快;9压缩比最大,传输速度快,但处理速度最慢,使用默认即可

gzip_http_version  1.0:用于设置识别http协议版本,默认是1.1,目前大部分浏览器已经支持gzip解压,但处理较慢,也比较消耗服务器cpu资源

gzip_types  text/plain:压缩类型,是对哪些网页文档启用压缩功能

gzip_vary  on:选项可以让前端的缓存服务器经过gzip压缩的页面

命令:vi /usr/local/nginx/conf/nginx.conf

http  {

......

gzip  on;                           (取消注释)

gzip_buffers  4  16k

gzip_http_version  1.1

gzip_comp_level  2

gzip_min_length1k

gzip_vary  on

gzip_types  text/plain

二、nginx的深度监控

1.GoAccess简介

GoAccess是一个开源实时Web日志分析器和交互式查看器,可在Linux系统上的终端中或通过浏览器运行。它为需要动态可视化服务器报告的系统管理员提供快速且有价值的HTTP统计信息。
GoAccess解析指定的Web日志文件并将数据输出到X终端。特点包括:完全实时:所有面板和指标都定时在终端输出上每200毫秒更新一次,在HTML输出上每秒更新一次。
所需的最少配置:您只需针对访问日志文件运行它,选择日志格式,然后让GoAccess 解析访问日志并向您显示统计信息。
跟踪应用程序响应时间:跟踪处理请求所花费的时间。如果您想跟踪减慢网站速度的页面,则非常有用。
几乎所有Web日志格式:GoAccess允许任何自定义日志格式字符串。预定义选项包括 Apache、Nginx、Amazon S3、Elastic Load Balancing、CloudFront等增量日志处理:需要数据持久化?GoAccess能够通过磁盘持久性选项增量处理日志。

访问者:按小时或日期确定点击量、访问者、带宽和最慢运行请求的指标。每个
虚拟主机的指标:拥有多个虚拟主机(服务器块)?它有一个面板,显示哪个虚拟主机消耗了大部分Web服务器资源。

(1)GoAccess安装

安装编译安装

命令:dnf  install  -y  gcc  make  ncurses-devel  openssl-devel  gettext-devel

安装中文字体支持

命令:dnf  install  -y  wqy-microhei-fonts

源码编译安装GoAccess

命令:tar  -zxvf  goaccess-1.7.2.tar.gz

           cd  goaccess-1.7.2

           ./configure  --enable-utf8  --with-openssl

             make  &&  make  install

--enable-utf8 :启用Unicode支持(显示中文必备)

--with-openssl:支持HTTPS日志分析

 (2)配置中文环境

设置系统Locale为中文

命令:dnf  install  -y  glibc-langpack-zh

           localectl  set-locale  LANG=zh_CN.UTF-8

验证Locale是否生效

(3)GoAccess生成中文报告

--output=report.html:生成HTML报告

--real-time-html:实时更新报告

(4)测试访问

浏览器访问http://你的ip/report.html

2.nginx  vts简介

Nginx的VTS模块(VirtualHost Traffic Status)是一个开源监控工具,用于实时收集和分析Nginx的流量、性能指标及状态数据。以下是其核心功能和特点:

实时监控:

统计每个虚拟主机(server块)的请求量(QPS)、带宽使用、响应时间、连接数 等关键指标。支持按状态码(如2xx、4xx、5xx)分类统计请求。

数据可视化:

提供内置监控页面(默认路径/status),通过图表和表格展示实时及历史数据。支持JSON格式输出,方便集成到Prometheus、Grafana 监控平台。

扩展性:

通过Lua脚本扩展自定义监控逻辑(如记录特定API的响应时间)。可配置 数据存储策略(如保留最近1小时的数据)。

报警集成:

结合阀值规则触发告警(需配合外部工具如Zabbix、Telegram Bot)。

(1)nginx  vts安装

修改nginx配置文件

命令:vi /usr/local/nginx/conf/nginx.conf

http  {

......

vhost_traffic_status_zone;               (启用流量统计共享内存区)

......

Server  {

......

        location  /vts  {

                vhost_traffic_status_display;               (启用统计展示)

                vhost_traffic_status_display_format html;      (默认SON可设为html)

                access_log  off;                                         (关闭访问日志)

                             }

......

           }

}

           usr/local/nginx/sbin/nginx -t

            usr/local/nginx/sbin/nginx

(3)测试访问

浏览器访问http://你的ip/vts

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值