LNMP(三)Nginx负载均衡、ssl、php-fpm的pool及慢执行日志、open_basedir、php-fpm进程管理...

 

任务列表:
12.17 Nginx负载均衡
12.18 ssl原理
12.19 生成ssl密钥对
12.20 Nginx配置ssl
12.21 php-fpm的pool
12.22 php-fpm慢执行日志
12.23 open_basedir
12.24 php-fpm进程管理

扩展
ssl相关

https://blog.csdn.net/hherima/article/details/52469267
https://coding.net/u/aminglinux/p/nginx/git/blob/master/ssl/ca.md
https://coding.net/u/aminglinux/p/nginx/git/blob/master/ssl/ssl.md
负载均衡
https://coding.net/u/aminglinux/p/nginx/git/blob/master/proxy/lb.md
nginx算法分析https://blog.whsir.com/post-1482.html
root和alias
http://www.ttlsa.com/nginx/nginx-root_alias-file-path-configuration/

 

1 负载均衡:https://github.com/aminglinux/nginx/blob/master/proxy/lb.md

2 反向代理:相关缓存设置 https://github.com/aminglinux/nginx/blob/master/proxy/bu_ca.md

3.正向代理:https://github.com/aminglinux/nginx/blob/master/proxy/z_proxy.md

对于LNMP中的php-fom,掌握:

1 查php-fpm的slow log

2 配置php的错误日志(error_log log_error display_error error_reporting)

 

 

一、Nginx负载均衡

负载均衡在服务端开发中算是一个比较重要的特性。因为Nginx除了作为常规的Web服务器外,还会被大规模的用于反向代理前端,因为Nginx的异步框架可以处理很大的并发请求,把这些并发请求hold住之后就可以分发给后台服务端(backend servers,也叫做服务池, 后面简称backend)来做复杂的计算、处理和响应,这种模式的好处是相当多的:隐藏业务主机更安全,节约了公网IP地址,并且在业务量增加的时候可以方便地扩容后台服务器。

使用 dig 查看域名; 没有安装可以用yum安装此包:yum install -y bind-utils

1713b3e8baeb39898d9fc79029ae6d14c61.jpg

先创建简单的负载平衡模块,配置文件load.conf;

cd /usr/local/nginx/conf/vhost

vim /usr/local/nginx/conf/vhost/load.conf

upstream qq     //qq为模块名,自定义
{
ip_hash;     //负载均衡的算法
server 111.161.64.40:80; //默认端口为80,因此此处80可以省略
server 111.161.64.48:80;
}
server
{
listen 80;
server_name www.qq.com;
location /
{
proxy_pass http://qq;            //与upstream相同
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
}
}

2ce8c00a59e0a282fcf640b0541d67cc5ea.jpg

用curl -x测试www.qq.com,此时任意域名都会转到默认虚拟主机上;

[root@001 vhost]# curl -x127.0.0.1:80 www.qq.com
this is the default site.

检查load.conf配置文件语法,并加载

/usr/local/nginx/sbin/nginx -t

/usr/local/nginx/sbin/nginx -s reload

再curl -x测试www.qq.com,此时可以通过自己的机器能访问腾讯网站。说明代理成功

454365a1688b1e5172d5f2994a634d2fc8f.jpg

负载均衡扩展:
Nginx负载均衡(工作在七层“应用层”)功能主要是通过upstream模块实现,Nginx负载均衡默认对后端服务器有健康检测的能力,仅限于端口检测,在后端服务器比较少的情况下负载均衡能力表现突出。
Nginx的几种负载均衡算法:
1、轮询(默认):每个请求按时间顺序逐一分配到不同的后端服务器,如果后端某台服务器宕机,则自动剔除故障机器,使用户访问不受影响。
2、weight:指定轮询权重,weight值越大,分配到的几率就越高,主要用于后端每台服务器性能不均衡的情况。
3、ip_hash:每个请求按访问IP的哈希结果分配,这样每个访客固定访问一个后端服务器,可以有效的解决动态网页存在的session共享问题。
4、fair(第三方):更智能的一个负载均衡算法,此算法可以根据页面大小和加载时间长短智能地进行负载均衡,也就是根据后端服务器的响应时间来分配请求,响应时间短的优先分配。如果想要使用此调度算法,需要Nginx的upstream_fair模块。
5、url_hash(第三方):按访问URL的哈希结果来分配请求,使每个URL定向到同一台后端服务器,可以进一步提高后端缓存服务器的效率。如果想要使用此调度算法,需要Nginx的hash软件包。
在upstream模块中,可以通过server命令指定后端服务器的IP地址和端口,同时还可以设置每台后端服务器在负载均衡调度中的状态,常用的状态有以下几种:
1、down:表示当前server暂时不参与负载均衡。
2、backup:预留的备份机,当其他所有非backup机器出现故障或者繁忙的时候,才会请求backup机器,这台机器的访问压力最轻。
3、max_fails:允许请求的失败次数,默认为1,配合fail_timeout一起使用
4、fail_timeout:经历max_fails次失败后,暂停服务的时间,默认为10s(某个server连接失败了max_fails次,则nginx会认为该server不工作了。同时,在接下来的 fail_timeout时间内,nginx不再将请求分发给失效的server。)
一个负载均衡器的名称为whsirserver,这个名称可以自己定义,在后面proxy_pass直接调用即可。
proxy_next_upstream参数用来定义故障转移策略,当后端服务器节点返回500、502和执行超时等错误时,自动将请求转发到upstream负载均衡器中的另一台服务器,实现故障转移。

二、ssl原理

浏览器发送一个https的请求给服务器; 
服务器要有一套数字证书,可以自己制作,也可以向组织申请,区别就是自己颁发的证书需要客户端验证通过,才可以继续访问,而使用受信任的公司申请的证书则不会弹出提示页面,这套证书其实就是一对公钥和私钥;
服务器会把公钥传输给客户端;
客户端(浏览器)收到公钥后,会验证其是否合法有效,无效会有警告提醒,有效则会生成一串随机数,并用收到的公钥加密;
客户端把加密后的随机字符串传输给服务器;
服务器收到加密随机字符串后,先用私钥解密(公钥加密,私钥解密),获取到这一串随机数后,再用这串随机字符串加密传输的数据(该加密为对称加密,所谓对称加密,就是将数据和私钥也就是这个随机字符串通过某种算法混合在一起,这样除非知道私钥,否则无法获取数据内容);
服务器把加密后的数据传输给客户端; 
客户端收到数据后,再用自己的私钥也就是那个随机字符串解密;

7fcd96599426d5f749e32f0c8c37373a42c.jpg

三、生成SSL密钥对

cd /usr/local/nginx/conf/      公钥和私钥放到该目录下

生成key即“私钥”:openssl genrsa

rpm -qf `which openssl`     //查看openssl是哪个安装包,没有此命令,则安装

openssl genrsa -des3 -out tmp.key 2048 //生成私钥tmp.key,长度为2048

60167dc49a6e3ab22b9a95202b47500bb3d.jpg

openssl rsa -in tmp.key -out tobe.key     //转换key,取消密码,in指定哪个密钥转换,指定输出

rm -f tmp.key //因为两个一样,则删除tmp.key

自己设置一个证书;

openssl req -new -key tobe.key -out tobe.csr        //生成证书请求文件,需要拿这个文件和私钥一起生产公钥文件

90bf034909193f507b4746f630e178cfa4d.jpg

openssl x509 -req -days 365 -in tobe.csr -signkey tobe.key -out tobe.crt        //用私钥和刚才生成的文件,一起生成公钥

803874888165fc165f7c6f1d16a4d32d4af.jpg

查看生成的tobelinux的证书文件,其实购买SSL证书主要得到下面两个文件,有了这两个文件就可以配置nginx;

tobe.crt //公钥

tobe.csr

tobe.key //私钥

efde227f448dd40d89b02e3b8fc380fab88.jpg

四、Nginx配置ssl

mkdir /data/wwwroot/tobe.com  创建目录

vim /usr/local/nginx/conf/vhost/ssl.conf        //加入如下内容

server

{

listen 443;    

server_name tobe.com;

index index.html index.php;

root /data/wwwroot/tobe.com;

ssl on;        开启ssl,支持https

ssl_certificate tobe.crt;    指定公钥
    
ssl_certificate_key tobe.key;        指定私钥

ssl_protocols TLSv1 TLSv1.1 TLSv1.2;    协议,三种都配置

}

编辑完ssl配置文件,此时检查语法,发现当前Nginx并不支持SSL,因为当时辑Nginx编译时并没有配置支持SSL的参数

6f73f578923dd05cb5fd98e99c8e9385333.jpg

/usr/local/nginx/sbin/nginx -V         //查看nginx版本号

8c0d301eadde79ff39ed745286ba1c7ed1b.jpg

./configure --help |grep -i ssl //查找ssl

0c9f4cd215154ad1394ad32fbdd5abcf778.jpg

配置ssl模块,然后编译、安装

./configure --prefix=/usr/local/nginx --with-http_ssl_module
make & make install

检查语法、重启服务,查看监听端口,此时会出现443端口;

53aed42209395a7a69f557ff31946e962b5.jpg

测试

cd /data/wwwroot/tobe.com/

vim index.html //创建一个测试网页

curl -x127.0.0.1:443 https://tobe.com/ //要是这样,是访问不到的;

d4413067b12709ad49508060660e7471d82.jpg

vim /etc/hosts //配置hosts

5f03ea2e1c9652ca7ac9988f4595a6d6a86.jpg

此时可以直接:curl https://tobe.com/  ;但是证书是我自己颁发的,不合法;

curl: (60) Peer's certificate issuer has been marked as not trusted by the user.

More details here: http://curl.haxx.se/docs/sslcerts.html

curl performs SSL certificate verification by default, using a "bundle"

of Certificate Authority (CA) public keys (CA certs). If the default

bundle file isn't adequate, you can specify an alternate file

using the --cacert option.

If this HTTPS server uses a certificate signed by a CA represented in

the bundle, the certificate verification probably failed due to a

problem with the certificate (it might be expired, or the name might

not match the domain name in the URL).

If you'd like to turn off curl's verification of the certificate, use

the -k (or --insecure) option.

此时在windows下浏览器测试;

假如在浏览器:https://tobe.com 此时无反应,则需要清除规则;或者增加一个443的规则

iptables -F

6ab6c8b5e2488be69d2d367db0d48e2844c.jpg

五、php-fpm的pool

Nginx可以配置多个虚拟主机,php-fpm配置文件php-fpm.conf可以设置多个pool,每个pool可以监听一个端口,在其中一个pool资源耗尽,会导致其他站点无法访问资源,报502错误。有必要把站点进行分离,分别使用单独的pool。

/usr/local/php-fpm/etc/

df8491aa7bd191b87625dc8a8f79126e80c.jpg

在php-fpm配置文件中添加一个tobe.com的池子;

vim php-fpm.conf

[tobe.com]
listen = /tmp/tobe.sock
listen.mode=666
user = php-fpm
group = php-fpm
pm = dynamic
pm.max_children = 50
pm.start_servers = 20
pm.min_spare_servers = 5
pm.max_spare_servers = 35
pm.max_requests = 500
rlimit_files = 1024

769ae4ae4acb366b6491d2581cc2bd03e4c.jpg

检查语法,并重启php-fpm

/usr/local/nginx/sbin/nginx -t
/etc/init.d/php-fpm reload

查看进程,此时 有两个池子,其中一个就是tobe.com

e58cd395065b9e2b29e74ee45be9a8d5ddc.jpg

虚拟主机里面设置

cd /usr/local/nginx/conf/vhost

vim aaa.com.conf

location ~ \.php$
{
include fastcgi_params;
fastcgi_pass unix:/tmp/tobe.sock; //定义池子
fastcgi_index index.php;
fastcgi_param SCRIPT_FILENAME /data/wwwroot/default$fastcgi_script_name;
}

1230c3504bef89b0795d2937d1a4d1bf52e.jpg

cd /usr/local/php-fpm/etc/

vim php-fpm.conf //编辑php-fpm主配置文件

c693a552721c746f45bd4b12c12526bad9f.jpg

global中增加此行,删除后面的池子,相当于一个模块名,并把之前的内容保存

include = etc/php-fpm.d/*.conf

af4b1ea0698710a0a82d94eb3aabf2007ea.jpg

mkdir php-fpm.d     //根据php-fpm配置文件创建相应目录

进入目录,创建vim www.conf,把之前删除的www粘贴进来

创建tobe.com.conf,粘贴之前的tobe.com内容

fdd4939516e6d66318f2819cd1c1f37c4fd.jpg

查看php-fpm.conf内容,只有三行,其余的两个池子,被分成两个文件;

2ef85d1cf550786c71f46af02c564ed15d1.jpg

检查语法,并重启服务

/usr/local/nginx/sbin/nginx -t

 /etc/init.d/php-fpm reload

24c1729bae5d4b1fab6b4fa5e00a8bad0ff.jpg

在查看进程,同样有两个池子,顺序改变

6a23e8ee68e056d50b8cf6f149f8c038184.jpg

六、php-fpm慢执行日志

php网站,建议使用lnmp架构的一个好处就是查看“慢日志”,当我们的客户或者manager发现站点访问速度点慢,如果全部的负载均不是很高,一切正常还是慢,那唯一的办法就是检查“慢日志”,慢日志会向我们详细的展示某个页面的多少行代码在执行过程中超过了我们设定的阀值!

针对www.conf

在www.conf配置文件中,最后两行加上如下内容;

request_slowlog_timeout = 1         超过1秒就记录,可以写成2秒,1-2之间

slowlog = /usr/local/php-fpm/var/log/www-slow.log        //定义日志内容的目录

重启服务后,查看指定的目录是否生成 www_slow.log 日志

/usr/local/php-fpm/sbin/php-fpm -t

/etc/init.d/php-fpm reload

 ls /usr/local/php-fpm/var/log/

f73c9d49698786cccb538f429e5356bb004.jpg

模拟一个慢执行的php

vim /data/wwwroot/test.com/sleep.php  创建一个sleep.php

<?php 
echo "test slow log";
sleep(2);
echo “done”;
?>

curl -x127.0.0.1:80 test.com/sleep.php         //执行成功,返回test slow log

cat /usr/local/php-fpm/var/log/www-slow.log //查看慢日志

 

0565577b14131742fae28c1a8f0992e5f88.jpg

提示第三行报错,超过1秒

5c9662ee619ef9ffb598f39e1eed3453399.jpg

七、open_basedir

如果一个server有很多个web服务,那么不建议直接把open_basedir直接配置在php.ini中了。Apache可以针对每个虚拟主机设置一个Open_basedir,php-fpm同样也可以针对不同的pool设置不同的Open_basedir

再www.conf配置文件中,添加:php_admin_value[open_basedir]=/data/wwwroot/test.com:/tmp/,如下

此处需要注意:目录下对应的是test.com;因为www池子,也就是www.conf对应的是test.com这个虚拟主机

location ~ \.php$

{

include fastcgi_params;

fastcgi_pass unix:/tmp/php-fcgi.sock; //注意:php-fcgi.sock

fastcgi_index index.php;

fastcgi_param SCRIPT_FILENAME /data/wwwroot/test.com$fastcgi_script_name;

}

编辑www.conf配置文件

[www]    
listen = /tmp/php-fcgi.sock        //注意:此处与虚拟主机对应
listen.mode = 666
user = php-fpm
group = php-fpm
pm = dynamic
pm.max_children = 50
pm.start_servers = 20
pm.min_spare_servers = 5
pm.max_spare_servers = 35
pm.max_requests = 500
rlimit_files = 1024
request_slowlog_timeout = 1
slowlog = /usr/local/php-fpm/var/log/www-slow.log
php_admin_value[open_basedir]=/data/wwwroot/test.com:/tmp/        //添加此行,限制在test.com和、tmp目录下

重启服务后,测试成功

 curl -x127.0.0.1:80 test.com/3.php -I

42354aee3e3d3731ad62a8cf4a44fc1a9bb.jpg

参考笔记:https://www.jb51.net/article/110264.htm

八、php-fpm进程管理

53c89cb20148881c664d68291c3dfa13dd9.jpg

pm = dynamic //动态进程管理,也可以是static 

pm.max_children = 50 //最大子进程数,ps aux可以查看

pm.start_servers = 20 //启动服务时会启动的进程数

pm.min_spare_servers = 5 //定义在空闲时段,子进程数的最少数量,如果达到这个数值时,php-fpm服务会自动派生新的子进程。 

pm.max_spare_servers = 35 //定义在空闲时段,子进程数的最大值,如果高于这个数值,php-fpm服务就开始清理空闲的子进程。

pm.max_requests = 500 //定义一个子进程最多处理的请求数,也就是说在一个php-fpm的子进程最多可以处理这么多请求,当达到这个数值时,它会自动退出。

rlimit_files = 1024 :设置文件打开描述符的rlimit限制. 默认值: 系统定义值 系统默认可打开句柄是1024,可使用 ulimit -n查看,ulimit -n 2048修改(临时修改)。

 

 

 

转载于:https://my.oschina.net/u/4093217/blog/3050955

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值