web:Nginx调度器及优化

Nginx反向代理

实现如下功能：

1. 后端Web服务器两台，可以使用httpd实现
2. Nginx采用轮询的方式调用后端Web服务器
3. 两台Web服务器的权重要求设置为不同的值
4. 最大失败次数为1，失败超时时间为30秒

后端Web服务器两台，可以使用httpd实现

拓扑结构

部署实施后端Web服务器

• 部署后端Web1和web2服务器
  后端Web服务器可以简单使用yum方式安装httpd实现Web服务，为了可以看出后端服务器的不同，可以将两台后端服务器的首页文档内容设置为不同的内容。

yum  -y  install  httpd
echo "192.168.2.100" > /var/www/html/index.html
systemctl restart httpd

配置Nginx服务器，添加服务器池，实现反向代理功能

• 修改/usr/local/nginx/conf/nginx.conf配置文件

vim /usr/local/nginx/conf/nginx.conf
.. ..
http {
.. ..
#使用upstream定义后端服务器集群，集群名称任意(如webserver)
#使用server定义集群中的具体服务器和端口
upstream webserver {
                server 192.168.2.100:80;
                server 192.168.2.200:80;
        }
.. ..
server {
        listen        80;
        server_name  localhost;
            location / {
#通过proxy_pass将用户的请求转发给webserver集群
            proxy_pass http://webserver;
        }
}

• 重新加载配置

/usr/local/nginx/sbin/nginx -s reload

• 客户端使用浏览器访问代理服务器测试轮询效果

curl http://192.168.4.5      #使用该命令多次访问查看效果
curl http://192.168.4.5      #使用该命令多次访问查看效果

配置upstream服务器集群池属性

设置失败次数，超时时间，权重

weight可以设置后台服务器的权重，max_fails可以设置后台服务器的失败次数，fail_timeout可以设置后台服务器的失败超时时间。

vim /usr/local/nginx/conf/nginx.conf
.. ..
http {
.. ..
upstream webserver {
                server 192.168.2.100 weight=1 max_fails=1 fail_timeout=30;
                server 192.168.2.200 weight=2 max_fails=2 fail_timeout=30;
                server 192.168.2.101 down;
        }
#weight设置服务器权重值，默认值为1
#max_fails设置最大失败次数，测试服务器几次才确认服务器失败
#fail_timeout设置失败超时时间，单位为秒
#down标记服务器已关机，不参与集群调度
.. ..
server {
        listen        80;
        server_name  localhost;
            location / {
            proxy_pass http://webserver;
        }
}

/usr/local/nginx/sbin/nginx -s reload

• 关闭一台后端服务器（如web1）
  systemctl stop httpd
• 客户端使用浏览器访问代理服务器测试轮询效果
  curl http://192.168.4.5
• 再次启动后端服务器的httpd（如web1）
  systemctl start httpd
• 客户端再次使用浏览器访问代理服务器测试轮询效果
  curl http://192.168.4.5

配置upstream服务器集群的调度算法

设置相同客户端访问相同Web服务器

vim /usr/local/nginx/conf/nginx.conf
.. ..
http {
.. ..
upstream webserver {
#通过ip_hash设置调度规则为：相同客户端访问相同服务器
                 ip_hash;
                server 192.168.2.100 weight=1 max_fails=2 fail_timeout=10;
                server 192.168.2.200 weight=2 max_fails=2 fail_timeout=10;
        }
.. ..
server {
        listen        80;
        server_name  www.tarena.com;
            location / {
            proxy_pass http://webserver;
        }
}

/usr/local/nginx/sbin/nginx -s reload
curl http://192.168.4.5

Nginx的TCP/UDP调度器

部署支持4层TCP/UDP代理的Nginx服务器

• 部署nginx服务器
  编译安装必须要使用–with-stream参数开启4层代理模块。

yum -y install gcc pcre-devel openssl-devel   #安装依赖包
tar  -xf   nginx-1.12.2.tar.gz
cd  nginx-1.12.2
./configure --with-http_ssl_module  \  #开启SSL加密功能
> --with-stream   #开启4层反向代理功能
make && make install

配置Nginx服务器，添加服务器池，实现TCP/UDP反向代理功能

• 修改/usr/local/nginx/conf/nginx.conf配置文件

 vim /usr/local/nginx/conf/nginx.conf
stream {
            upstream backend {
               server 192.168.2.100:22;            //后端SSH服务器的IP和端口
               server 192.168.2.200:22;
}
            server {
                listen 12345;                    //Nginx监听的端口
                 proxy_pass backend;
             }
}
http {
.. ..
}

/usr/local/nginx/sbin/nginx -s reload

• 客户端使用访问代理服务器测试轮询效果

ssh 192.168.4.5 -p 12345   #使用该命令多次访问查看效果

Nginx常见问题处理

如何自定义返回给客户端的404错误页面
如何查看服务器状态信息
如果客户端访问服务器提示“Too many open files”如何解决
如何解决客户端访问头部信息过长的问题
如何让客户端浏览器缓存数据

自定义报错页面

• 优化前，客户端使用浏览器访问不存在的页面，会提示404文件未找到
  firefox http://192.168.4.5/xxxxx //访问一个不存在的页面
• 修改Nginx配置文件，自定义报错页面

vim /usr/local/nginx/conf/nginx.conf
.. ..
        charset utf-8;   #仅在需要中文时修改该选项
error_page   404  /404.html;   #自定义错误页面
.. ..

vim /usr/local/nginx/html/404.html        //生成错误页面
Oops,No NO no page …

nginx -s reload

• 优化后，客户端使用浏览器访问不存在的页面，会提示自己定义的40x.html页面
  firefox http://192.168.4.5/xxxxx //访问一个不存在的页面

常见http状态码

如何查看服务器状态信息（非常重要的功能）

• 编译安装时使用–with-http_stub_status_module开启状态页面模块

tar  -zxvf   nginx-1.12.2.tar.gz
cd  nginx-1.12.2
./configure   \
> --with-http_ssl_module    #开启SSL加密功能
> --with-stream             #开启TCP/UDP代理模块
> --with-http_stub_status_module  #开启status状态页面
make && make install    //编译并安装

• 修改Nginx配置文件，定义状态页面

cat /usr/local/nginx/conf/nginx.conf
… …
location /status {
                stub_status on;
                 #allow IP地址;
                 #deny IP地址;
        }
… …

/usr/local/nginx/sbin/nginx -s reload

• 优化后，查看状态页面信息

curl http://192.168.4.5/status
Active connections: 1 
server accepts handled requests
 10 10 3 
Reading: 0 Writing: 1 Waiting: 0

Active connections：当前活动的连接数量。
Accepts：已经接受客户端的连接总数量。
Handled：已经处理客户端的连接总数量。
（一般与accepts一致，除非服务器限制了连接数量）。
Requests：客户端发送的请求数量。
Reading：当前服务器正在读取客户端请求头的数量。
Writing：当前服务器正在写响应信息的数量。
Waiting：当前多少客户端在等待服务器的响应。

优化Nginx并发量

• 优化前使用ab高并发测试

ab -n 2000 -c 2000 http://192.168.4.5/
Benchmarking 192.168.4.5 (be patient)
socket: Too many open files (24)    #提示打开文件数量过多

• 修改Nginx配置文件，增加并发量

vim /usr/local/nginx/conf/nginx.conf
.. ..
worker_processes  2;      #与CPU核心数量一致
events {
worker_connections 65535; #每个worker最大并发连接数
}
.. ..

/usr/local/nginx/sbin/nginx -s reload

• 优化Linux内核参数（最大文件数量）

ulimit -a           #查看所有属性值
ulimit -Hn 100000   #设置硬限制（临时规则）
ulimit -Sn 100000   #设置软限制（临时规则）
vim /etc/security/limits.conf
    .. ..
*               soft    nofile            100000
*               hard    nofile            100000
#该配置文件分4列，分别如下：
#用户或组    硬限制或软限制    需要限制的项目   限制的值

• 优化后测试服务器并发量（因为客户端没调内核参数，所以在proxy测试）

ab -n 2000 -c 2000 http://192.168.4.5/

优化Nginx数据包头缓存

• 优化前，使用脚本测试长头部请求是否能获得响应

cat buffer.sh 
#!/bin/bash
URL=http://192.168.4.5/index.html?
for i in {1..5000}
do
    URL=${URL}v$i=$i
done
curl $URL    #经过5000次循环后，生成一个长

./buffer.sh
.. ..
<center><h1>414 Request-URI Too Large</h1></center>       #提示头部信息过大

• 修改Nginx配置文件，增加数据包头部缓存大小

vim /usr/local/nginx/conf/nginx.conf
.. ..
http {
client_header_buffer_size    1k;    #默认请求包头信息的缓存    
large_client_header_buffers  4 4k;  #大请求包头部信息的缓存个数与容量
.. ..
}

/usr/local/nginx/sbin/nginx -s reload

• 优化后，使用脚本测试长头部请求是否能获得响应

cat buffer.sh 
#!/bin/bash
URL=http://192.168.4.5/index.html?
for i in {1..5000}
do
    URL=${URL}v$i=$i
done
curl $URL

./buffer.sh

浏览器本地缓存静态数据

• 使用Firefox浏览器查看缓存
  以Firefox浏览器为例，在Firefox地址栏内输入about:cache将显示Firefox浏览器的缓存信息，如图-3所示，点击List Cache Entries可以查看详细信息。
  
• 清空firefox本地缓存数据
  
• 修改Nginx配置文件，定义对静态页面的缓存时间

vim /usr/local/nginx/conf/nginx.conf
server {
        listen       80;
        server_name  localhost;
        location / {
            root   html;
            index  index.html index.htm;
        }
location ~* \.(jpg|jpeg|gif|png|css|js|ico|xml)$ {
expires        30d;   #定义客户端缓存时间为30天
}
}

cp /usr/share/backgrounds/day.jpg /usr/local/nginx/html
/usr/local/nginx/sbin/nginx -s reload

• 优化后，使用Firefox浏览器访问图片，再次查看缓存信息

firefox http://192.168.4.5/day.jpg

在firefox地址栏内输入about:cache，查看本地缓存数据，查看是否有图片以及过期时间是否正确。