Apache Httpd负载均衡Tomcat并实现Session Sticky和Session Cluster

大纲

  前言

  • 实验拓扑

  • 实验步骤

    • 安装配置tomcat

    • 安装配置Apache Httpd并测试

    • 实现session sticky

    • 实现Session Cluster

  • 总结

前言

上篇文章我们介绍如何构建一个LANMT平台并搭建一个jspxcms, 这次我们介绍使用apache httpd负载均衡Tomcat并实现Session StickySession Cluster

实验拓扑

blob.png

实验步骤

安装配置tomcat

我们首先配置Tomcat, 安装过程这里不做叙述, 不明白的可以看我上篇博客: tomcat基础进阶

安装Tomcatnode2,3都要操作

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
[root@node1 ~] # [root@node1 ~]# wget http://mirrors.cnnic.cn/apache/tomcat/tomcat-8/v8.0.33/bin/apache-tomcat-8.0.33.tar.gz
[root@node1 ~] # tar xf apache-tomcat-8.0.33.tar.gz  -C /usr/local/
[root@node1 ~] # cd /usr/local ; ln -sv apache-tomcat-8.0.33 tomcat ; cd ~
[root@node1 ~] # wget http://download.oracle.com/otn-pub/java/jdk/8u77-b03/jdk-8u77-linux-x64.rpm #如果下载出错, 使用浏览器下载
[root@node1 ~] # rpm -ivh jdk-8u77-linux-x64.rpm   #安装JDK
 
[root@node1 ~] # vim /etc/profile.d/java.sh     #定义JAVA_HOME
export  JAVA_HOME= /usr/java/latest
export  PATH=$JAVA_HOME /bin :$PATH
 
[root@node1 ~] # vim /etc/profile.d/tomcat.sh    #配置tomcat的环境变量
export  CATALINA_BASE= /usr/local/tomcat
export  PATH=$CATALINA_BASE /bin :$PATH
 
[root@node1 ~] # source /etc/profile.d/tomcat.sh
[root@node1 ~] # source /etc/profile.d/java.sh


配置虚拟主机

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
[root@node2 ~] # vim /usr/local/tomcat/conf/server.xml   
 
#设置默认虚拟主机为web1.anyisalin.com #node3的jvmRoute设置为TomcatB
<Engine name= "Catalina"  defaultHost= "web1.anyisalin.com"  jvmRoute= "TomcatA" >  
 
 
#添加虚拟主机
<Host name= "web1.anyisalin.com"  appBase= "/data/webapps/"  unpackWARS= "true"  autoDeploy= "true" >
    <Context path= ""  docBase= "/data/webapps"  reloadable= "true"  />
      <Valve className= "org.apache.catalina.valves.AccessLogValve"  directory= "/data/logs"
         prefix= "web1_access_log."  suffix= ".txt"
         pattern= "%h %l %u %t &quot;%r&quot; %s %b"  />
< /Host >
 
[root@node2 ~] # mkdir -PV /data/webapps/{WEB-INF,META-INF,classes,lib}  #创建目录


node2创建网页文件

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
[root@node2 ~] # cd /data/webapps/
 
[root@node2 ~] # vim index.jsp  #创建网页文件
<%@ page language= "java"  %>
<html>
   < head ><title>TomcatA< /title >< /head >
   <body>
     <h1><font color= "red" >TomcatA.magedu.com< /font >< /h1 >
     <table align= "centre"  border= "1" >
       < tr >
         <td>Session ID< /td >
     <% session.setAttribute( "magedu.com" , "magedu.com" ); %>
         <td><%= session.getId() %>< /td >
       < /tr >
       < tr >
         <td>Created on< /td >
         <td><%= session.getCreationTime() %>< /td >
      < /tr >
     < /table >
   < /body >
< /html >
 
[root@node2 webapps] # catalina.sh start #启动tomcat


node3创建网页文件

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
[root@node3 ~] # cd /data/webapps/
 
[root@node3 ~] # vim index.jsp  #创建网页文件
<%@ page language= "java"  %>
<html>
   < head ><title>TomcatB< /title >< /head >
   <body>
     <h1><font color= "blue" >TomcatB.magedu.com< /font >< /h1 >
     <table align= "centre"  border= "1" >
       < tr >
         <td>Session ID< /td >
     <% session.setAttribute( "magedu.com" , "magedu.com" ); %>
         <td><%= session.getId() %>< /td >
       < /tr >
       < tr >
         <td>Created on< /td >
         <td><%= session.getCreationTime() %>< /td >
      < /tr >
     < /table >
   < /body >
< /html >
 
[root@node3 webapps] # catalina.sh start #启动tomcat


访问测试

blob.png

blob.png


安装配置Apache Httpd并测试

安装httpd 在node1

1
[root@node1 ~] # yum install httpd -y

配置httpd 
mod_Proxy_balancer模块文档

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
[root@node1 ~] # cd /etc/httpd/conf.d/
 
[root@node1 conf.d] # vim virt.conf 
<Proxy balancer: //lbcluster >
    BalancerMember ajp: //172 .16.1.3:8009 loadfactor=1 route=TomcatA
    BalancerMember ajp: //172 .16.1.4:8009 loadfactor=1 route=TomcatB
< /Proxy >
 
<VirtualHost *:80>
   ServerName www.anyisalin.com
   ProxyVia On
   ProxyRequests Off
   ProxyPassReverse / balancer: //lbcluster/
   ProxyPass / balancer: //lbcluster/
< /VirtualHost >
 
[root@node1 conf.d] # service httpd start  #启动httpd

测试负载均衡效果

1461310792874371.gif



实现session sticky

如果tomcat运行着一个动态站点, 那么上面这种byrequest的负载均衡调度算法就有很大问题了, 可能刚登录站点再刷新又回到没有登录的状态了, 所以我们就要实现session sticky, 其实session sticky就是我们之前lvs的sh算法, 和nginxip_hash实现的效果

编辑httpd配置文件

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
[root@node1 ~] # vim /etc/httpd/conf.d/virt.conf   
## 主要添加两段参数
##Header add Set-Cookie "ROUTEID=.%{BALANCER_WORKER_ROUTE}e; path=/" env=BALANCER_ROUTE_CHANGED
##ProxySet stickysession=ROUTEID 
 
Header add Set-Cookie  "ROUTEID=.%{BALANCER_WORKER_ROUTE}e; path=/"  env =BALANCER_ROUTE_CHANGED  #新添加的
<Proxy balancer: //lbcluster >
    BalancerMember ajp: //172 .16.1.3:8009 loadfactor=1 route=TomcatA
    BalancerMember ajp: //172 .16.1.4:8009 loadfactor=1 route=TomcatB
    ProxySet stickysession=ROUTEID   #新添加的
< /Proxy >
 
<VirtualHost *:80>
   ServerName www.anyisalin.com
   ProxyVia On
   ProxyRequests Off
   ProxyPassReverse / balancer: //lbcluster/
   ProxyPass / balancer: //lbcluster/
< /VirtualHost >
 
[root@node1 conf.d] # service httpd restart   #重启httpd


测试session sticky效果 
如下图, 我们成功的将session绑定在了TomcatA(Node2)主机上

1461310792920498.gif

实现Session Cluster

我们使用session sticky会有很多问题, 如果某台主机宕机了, 那么用户的session就丢失了, 所以我们还可以通过session cluster保存用户会话

什么是Session Cluster

正常情况下session信息是保存在用户所访问的服务器上,服务器宕机, 用户的session就丢失了, 但是我们可以通过session cluster的方式来实现将用户的session信息保存在后端所有的服务器上, 这样来, 无论用户在访问哪一台服务器,session都不会丢失

四种常见的session manager

  • StandardManager

  • PersistentManager: 可以将session信息保存在持久存储中

  • DeltaManager: 将session信息通过多播的形式共享到其他节点

  • BackupManager: 将session信息共享到特定的一个节点上

注意: 我们要删掉刚才对session sticky的配置

编辑tomcat作配置文件

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
[root@node2 conf] # vim server.xml
下列内容放在<Host />内
 
<Cluster className= "org.apache.catalina.ha.tcp.SimpleTcpCluster"
         channelSendOptions= "8" >
 
<Manager className= "org.apache.catalina.ha.session.DeltaManager"
          expireSessionsOnShutdown= "false"
          notifyListenersOnReplication= "true" />
 
<Channel className= "org.apache.catalina.tribes.group.GroupChannel" >
    <Membership className= "org.apache.catalina.tribes.membership.McastService"
          address= "228.0.1.7"
          port= "45564"
          frequency= "500"
          dropTime= "3000" />
<Receiver className= "org.apache.catalina.tribes.transport.nio.NioReceiver"
           address= "auto"
           port= "4000"
           autoBind= "100"
           selectorTimeout= "5000"
           maxThreads= "6" />
 
<Sender className= "org.apache.catalina.tribes.transport.ReplicationTransmitter" >
      <Transport className= "org.apache.catalina.tribes.transport.nio.PooledParallelSender" />
       < /Sender >
        <Interceptor className= "org.apache.catalina.tribes.group.interceptors.TcpFailureDetector" />
        <Interceptor className= "org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor" />
           < /Channel >
 
           <Valve className= "org.apache.catalina.ha.tcp.ReplicationValve"
                  filter= "" />
           <Valve className= "org.apache.catalina.ha.session.JvmRouteBinderValve" />
 
           <Deployer className= "org.apache.catalina.ha.deploy.FarmWarDeployer"
                     tempDir= "/tmp/war-temp/"
                     deployDir= "/tmp/war-deploy/"
                     watchDir= "/tmp/war-listen/"
                     watchEnabled= "false" />
 
<ClusterListener className= "org.apache.catalina.ha.session.ClusterSessionListener" />
< /Cluster >


配置WEB-INF中的web.xml文件

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
[root@node2 conf] # cd /data/webapps/
[root@node2 webapps] # cp /usr/local/tomcat/webapps/ROOT/WEB-INF/web.xml WEB-INF/  #拷贝一份模板
[root@node2 webapps] # vim WEB-INF/web.xml
#添加下面这一行,在</web-app>内
<distributable/>
 
##注意: 这里是node3
[root@node3 webapps] # scp node2.anyisalin.com:/usr/local/tomcat/conf/server.xml /usr/local/tomcat/conf/server.xml  #复制node2配置文件
[root@node3 webapps] # scp node2.anyisalin.com:/data/webapps/WEB-INF/web.xml /data/webapps/WEB-INF/ 
 
[root@node2 webapps] # catalina.sh stop  #重启tomcat
[root@node2 webapps] # catalina.sh start 
 
[root@node3  webapps] # catalina.sh stop  #重启tomcat
[root@node3 webapps] # catalina.sh start


session cluster测试 
如下图, 现在我们即使使用byrequests算法也不会丢失sesssion

1461310792997334.gif

总结

我们本文实现了tomcat的负载均衡和session保持的各种方法, 但是还是有很大问题, 我们试想在用户并发高的场景下, 多台tomcat服务器一直在多播, 很可能造成网络拥塞, 所以我们还有一种解决方案session server, 使用单台服务器保存用户的session信息, 我们会在下篇文章向大家介绍!

作者水平很低, 如果有错误及时指出, 如果你觉得本文写的好请点一波赞~(≧▽≦)/~ 
作者: AnyISaIln QQ: 14494724

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值