一、Nginx+Tomcat负载均衡、动静分离
1、实验需求
(1)Nginx+Tomcat负载均衡、动静分离
(2)Nginx作为负载均衡器,Tomcat作为应用服务器
(3)Nginx 服务器:192.168.142.5
(4)Tomcat多实例服务器1:192.168.142.4:8080 192.168.142.4:8081
(5)Tomcat单实例服务器2:192.168.142.6
2、部署Nginx负载均衡器(192.168.142.5)
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 | systemctl stop firewalld setenforce 0 #安装所需开发包和编译环境、编译器 yum -y install pcre-devel zlib-devel openssl-devel gcc gcc-c++ make #创建程序用户 useradd -M -s /sbin/nologin nginx #解压安装包 cd /opt tar zxvf nginx-1.12.0.tar.gz -C /opt/ #指定安装路径、指定用户名、组名、启用模块以支持统计状态 cd nginx-1.12.0/ ./configure \ --prefix=/usr/local/nginx \ --user=nginx \ -- group =nginx \ --with-file-aio \ #启用文件修改支持 --with-http_stub_status_module \ #启用状态统计 --with-http_gzip_static_module \ #启用 gzip静态压缩 --with-http_flv_module \ #启用 flv模块,提供对 flv 视频的伪流支持 --with-http_ssl_module #启用 SSL模块,提供SSL加密功能 --with-stream #启用stream模块,提供四层调度 #编译及安装 make && make install #软链接便于系统识别nginx操作命令 ln -s /usr/local/nginx/sbin/nginx /usr/local/sbin/ #添加nginx系统服务 vim /lib/systemd/system/nginx.service [Unit] Description=nginx After=network.target [Service] Type=forking PIDFile=/usr/local/nginx/logs/nginx.pid ExecStart=/usr/local/nginx/sbin/nginx ExecrReload=/bin/kill -s HUP $MAINPID ExecrStop=/bin/kill -s QUIT $MAINPID PrivateTmp= true [Install] WantedBy=multi-user.target #赋权及开启服务、开启开机自启 chmod 754 /lib/systemd/system/nginx.service systemctl start nginx.service systemctl enable nginx.service |
![](https://img-blog.csdnimg.cn/img_convert/56a2aad33da09e46fe446436abf3094a.png)
3、部署单个实例tomcat服务器(192.168.142.6)
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 | #关闭防火墙 systemctl stop firewalld systemctl disable firewalld setenforce 0 #安装JDK cd /opt tar zxvf jdk-8u91-linux-x64.tar.gz -C /usr/local/ #设置JDK环境变量 vim /etc/profile export JAVA_HOME=/usr/local/jdk1.8.0_91 export JRE_HOME=${JAVA_HOME}/jre export CLASSPATH=.:${JAVA_HOME}/lib:${JAVA_HOME}/lib export PATH=${JAVA_HOME}/bin:$PATH source /etc/profile #安装启动Tomcat cd /opt tar zxvf apache-tomcat-9.0.16.tar.gz mv apache-tomcat-9.0.16 /usr/local/tomcat /usr/local/tomcat/bin/shutdown.sh /usr/local/tomcat/bin/startup.sh |
![](https://img-blog.csdnimg.cn/img_convert/8c929ee1c09964298bda776cb59d54ea.png)
![](https://img-blog.csdnimg.cn/img_convert/f825b6a52be96d198b3ffd259fc26b93.png)
4、部署两个实例tomcat服务器(192.168.142.4)
详情见上章博客
5、动静分离配置
(1)多实例动态分离配置(192.168.142.4)
实例一:
1 2 3 4 5 6 7 8 9 10 11 12 13 | mkdir /usr/local/tomcat/tomcat1/webapps/test #创建动态测试文件 vim /usr/local/tomcat/tomcat1/webapps/test/index.jsp #动态页面显示内容 <%@ page language= "java" import= "java.util.*" pageEncoding= "UTF-8" %> <html> <head> <title>JSP test1 page</title> #指定为test1页面 </head> <body> <% out .println( "test1 test1 test1 " );%> </body> </html> |
![](https://img-blog.csdnimg.cn/img_convert/60f8a02e5a1ca1c2ed4725cfa9487b0e.png)
1 2 3 4 5 6 7 | vim /usr/local/tomcat/tomcat1/conf/server.xml #删除前面的HOST配置 <Host name= "localhost" appBase= "webapps" unpackWARs= "true" autoDeploy= "true" xmlValidation= "false" xmlNamespaceAware= "false" > <Context docBase= "/usr/local/tomcat/tomcat1/webapps/test" path= "" reloadable= "true" /> </Host> /usr/local/tomcat/tomcat1/bin/shutdown.sh /usr/local/tomcat/tomcat1/bin/startup.sh |
![](https://img-blog.csdnimg.cn/img_convert/e58ec47b85ce1ecbed4afae7fe3151a6.png)
![](https://img-blog.csdnimg.cn/img_convert/a797127a7b994b003708267207de6b3a.png)
实例二:
1 2 3 4 5 6 7 8 9 10 11 12 13 | mkdir /usr/local/tomcat/tomcat2/webapps/test #创建动态测试文件 vim /usr/local/tomcat/tomcat2/webapps/test/index.jsp #动态页面显示内容 <%@ page language= "java" import= "java.util.*" pageEncoding= "UTF-8" %> <html> <head> <title>JSP test2 page</title> #指定为test2页面 </head> <body> <% out .println( "test2 test2 test2" );%> </body> </html> |
![](https://img-blog.csdnimg.cn/img_convert/17250c7c42aa2adf2634540ebdd0b317.png)
1 2 3 4 5 6 7 | vim /usr/local/tomcat/tomcat2/conf/server.xml #删除前面的HOST配置 <Host name= "localhost" appBase= "webapps" unpackWARs= "true" autoDeploy= "true" xmlValidation= "false" xmlNamespaceAware= "false" > <Context docBase= "/usr/local/tomcat/tomcat2/webapps/test" path= "" reloadable= "true" /> </Host> /usr/local/tomcat/tomcat2/bin/shutdown.sh /usr/local/tomcat/tomcat2/bin/startup.sh |
![](https://img-blog.csdnimg.cn/img_convert/c344d9f1371f3afc9faaeef9399e61dc.png)
![](https://img-blog.csdnimg.cn/img_convert/3d4c31f95b031a733727ec12528c2b6c.png)
![](https://img-blog.csdnimg.cn/img_convert/e97de4a835bf8103f2421dcac955775e.png)
(2)单实例Tomcat的server配置(192.168.142.6)
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 | mkdir /usr/local/tomcat/webapps/test vim /usr/local/tomcat/webapps/test/index.jsp <%@ page language= "java" import= "java.util.*" pageEncoding= "UTF-8" %> <html> <head> <title>JSP test3 page</title> #指定为test3页面 </head> <body> <% out .println( "test3 test3 test3" );%> </body> </html> vim /usr/local/tomcat/conf/server.xml #删除前面的HOST配置 <Host name= "localhost" appBase= "webapps" unpackWARs= "true" autoDeploy= "true" xmlValidation= "false" xmlNamespaceAware= "false" > <Context docBase= "/usr/local/tomcat/webapps/test" path= "" reloadable= "true" > </Context> </Host> /usr/local/tomcat/bin/shutdown.sh /usr/local/tomcat/bin/startup.sh |
![](https://img-blog.csdnimg.cn/img_convert/9c5bdecfe4777153611036e192ef5ab2.png)
![](https://img-blog.csdnimg.cn/img_convert/4e2990b3dfa86c232e45b0dc02864721.png)
![](https://img-blog.csdnimg.cn/img_convert/fef455fbb3a180498d2301c30dd7deae.png)
6、Nginx的七层代理配置(192.168.142.5)
(1)准备静态页面和静态图片
1 2 3 4 | echo '<html><body><h1>111222333</h1></body></html>' > /usr/local/nginx/html/index.html #准备静态网页 mkdir /usr/local/nginx/html/img cp /root/1.png /usr/local/nginx/html/img #准备图片文件 |
![](https://img-blog.csdnimg.cn/img_convert/3439b2f474f0ee4cec57944cd6305504.png)
(2)Nginx配置文件修改
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 | vim /usr/local/nginx/conf/nginx.conf ...... http { ...... #gzip on; upstream tomcat_server { #配置负载均衡的服务器列表,weight参数表示权重,权重越高,被分配到的概率越大 server 192.168.80.12:8080 weight=1; server 192.168.80.12:8081 weight=1; server 192.168.80.15:8080 weight=1; } server { listen 80; server_name www.123.com; charset utf-8; #access_log logs/host.access.log main; location ~ .*\.jsp$ { #配置Nginx处理动态页面请求,将 .jsp文件请求转发到Tomcat 服务器处理 proxy_pass http: //tomcat_server; proxy_set_header HOST $host; #设置后端的Web服务器可以获取远程客户端的真实IP;设定后端的Web服务器接收到的请求访问的主机名(域名或IP、端口),默认host的值为proxy_pass指令设置的主机名 proxy_set_header X-Real-IP $remote_addr; #把$remote_addr赋值给X-Real-IP,来获取源IP proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; #在nginx 作为代理服务器时,设置的IP列表,会把经过的机器ip,代理机器ip都记录下来 } location ~ .*\.(gif|jpg|jpeg|png|bmp|swf|css)$ { root /usr/local/nginx/html/img; #配置Nginx处理静态图片请求 expires 1d; } location / { root html; index index.html index.htm; } ...... } ...... } systemctl restart nginx.service |
![](https://img-blog.csdnimg.cn/img_convert/998756a31b6d0d33cc2b2597038cd610.png)
![](https://img-blog.csdnimg.cn/img_convert/cea5b60e586b4f1e6b10c331bbe552cd.png)
(3)浏览器验证
![](https://img-blog.csdnimg.cn/img_convert/2b7f062640acd797758438f0e8d2b08c.png)
![](https://img-blog.csdnimg.cn/img_convert/840c66ae76377db249f7bf642ad4d3dc.png)
![](https://img-blog.csdnimg.cn/img_convert/4087ca0576e5a5f7a2d8ed02f40f826a.png)
![](https://img-blog.csdnimg.cn/img_convert/27298fc8e8ec7df9f49f50e7719adff2.png)
![](https://img-blog.csdnimg.cn/img_convert/cbeb5336ca5a0cd471f02d27bc24b7d9.png)
7、Nginx的四层代理配置(192.168.142.5)
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 | vim /usr/local/nginx/conf/nginx.conf stream { #与http同等级,一般在http上面设置 upstream appserver { server 192.168.80.11:8080 weight=1; server 192.168.80.11:8081 weight=1; server 192.168.80.13:8080 weight=1; } server { listen 8080; proxy_pass appserver; } } server { listen 80; server_name www.gxd.com; charset utf-8; #access_log logs/host.access.log main; location ~ .*\.(gif|jpg|jpeg|png|bmp|swf|css)$ { root /usr/local/nginx/html/img; #配置Nginx处理静态图片请求 expires 1d; } systemctl restart nginx |
8、7层代理与4层代理区别
代理方式 | 区别 |
七层反向代理 | 是基于http/https/mail等代理转发 |
四层反向代理 | 是基于IP+PROT(TCP/UDP)转发 |
9、Nginx负载均衡模式
负载均衡模式 | 说明 |
rr负载均衡模式 | 每个请求按时间顺序逐一分配到不同的后端服务器,如果超过了最大失败次数后(max_fails,默认1),在失效时间内(fail_timeout,默认10秒),该节点失效权重变为0,超过失效时间后,则恢复正常,或者全部节点都为down后,那么将所有节点都恢复为有效继续探测,一般来说rr可以根据权重来进行均匀分配。 |
least_conn最少连接 | 优先将客户端请求调度到当前连接最少的服务器。 |
ip_hash负载均衡模式 | 每个请求按访问ip的hash结果分配,这样每个访客固定一个后端服务器,可以解决session的问题,但是ip_hash会造成负载不均,有的服务请求接收多,有的服务请求接收少,所以不建议采用ip_hash模式,session共享问题可用后端服务的session共享代替nginx的ip_hash。 |
fair(第三方)负载均衡模式 | 按后端服务器的响应时间来分配请求,响应时间短的优先分配。 |
url_hash(第三方)负载均衡模式 | 和ip_hash算法类似,是对每个请求按ur来的hash结果匹配,使每个url定向到同一个后端服务器,但是也会造成分配不均的问题,这种模式后端服务器为缓存时比较好。 |