用Redis存储Tomcat集群的Session实现session共享

2022-11-15 22:31:36

一、存储

前段时间，我花了不少时间来寻求一种方法，把新开发的代码推送到到生产系统中部署，生产系统要能够零宕机、对使用用户零影响。

我的设想是使用集群来搞定，通过通知负载均衡Nginx，取下集群中的Tomcat节点，然后对Tomcat上的应用进行升级，再通知负载均衡Nginx，把Tomcat节点重新加载上去。依次这么做，把集群中的所有Tomcat都替换一次即可。

那么问题来了，在取下Tomcat节点和加载新Tomcat节点时如何做到对用户无影响呢？方法很简单，共享Session。

下面，我们用实例来说明此方案。我们的例子使用了一台Nginx做负载均衡，后端挂接了两台Tomcat，且每台Tomcat的Session会话都保存到Redis数据库中。其中，Nginx配置为non-sticky运行模式，也即每一个请求都可以被分配到集群中的任何节点。当要上线新代码时，只需简单地取下Tomcat实例，此时所有的访问用户会被路由到活动的Tomcat实例中去，而且由于会话数据都是保存在Redis数据库中，所以活跃用户并不会受影响。当Tomcat更新完毕，又可以把此节点加入到Nginx中。

安装Nginx

  1. # sudo rpm -ivh nginx-1.4.2-1.el6.ngx.x86_64.rpm
<span style="font-size:14px;"># sudo rpm -ivh nginx-1.4.2-1.el6.ngx.x86_64.rpm</span>

修改配置文件/etc/nginx/nginx.conf，并添加下面的内容：

  1. http {
  2. upstream tomcat  {
  3. server localhost:8080;
  4. server localhost:8081;
  5. }
  6. include       /etc/nginx/mime.types;
  7. default_type  application/octet-stream;
<span style="font-size:14px;">http {
upstream tomcat  {
        server localhost:8080;
        server localhost:8081;
    }
include       /etc/nginx/mime.types;
default_type  application/octet-stream;
</span>

修改配置文件/etc/nginx/conf.d/default.conf并替换location部分的内容：

  1. location / {
  2. proxy_pass  http://tomcat;
  3. }
<span style="font-size:14px;">location / {
    proxy_pass  http://tomcat;
  }
</span>

重启Nginx

  1. # sudo service nginx restart
<span style="font-size:14px;"># sudo service nginx restart</span>

接下来，安装两个Tomcat实例。由于我们是在同一台服务器上做的演示，要让两台Tomcat不发生冲突，需要修改第二个Tomcat实例的端口号。由于Nginx配置为non-sticky运行模式，对每个请求采用的是Round-robin负载均衡方式，这意味着它会为每个请求都抽奖一个新会话。

接着，下载并安装Redis。步骤省略，很简单。

最后，我们需要配置Tomcat，让Tomcat把会话Session保存到Redis数据库。

我们要使用tomcat-redis-session-manager这样的第三方库，主页见：

https://github.com/jcoleman/tomcat-redis-session-manager

要注意此库并非开箱即用的，使用时需要做一些调整。你需要下载源码，并在更新了依赖库的版本后，重建项目。比如我使用了commons-pool2-2.2.jar和jedis-2.6.1.jar依赖库。要记住把这些jar文件复制到每一个Tomcat实例的lib子目录下。

在更新了commons-pool、jedis和tomcat版本这些库后，你可以使用build.gradle来构建整个项目。构建完毕后，复制新生成的tomcat-redis-session-manager-1.2.jar到每一个Tomcat实例的lib子目录下。并在修改每一个Tomcat实例的context.xml配置文件：

  1. <Valve className="com.orangefunction.tomcat.redissessions.RedisSessionHandlerValve" />
  2. <Manager className="com.orangefunction.tomcat.redissessions.RedisSessionManager"
  3. host="localhost"
  4. port="6379"
  5. database="0"
  6. maxInactiveInterval="60" />
<span style="font-size:14px;"><Valve className="com.orangefunction.tomcat.redissessions.RedisSessionHandlerValve" />
<Manager className="com.orangefunction.tomcat.redissessions.RedisSessionManager"
         host="localhost"
         port="6379"
         database="0"
         maxInactiveInterval="60" />
</span>

重启Tomcat实例。可以检查到Redis确实保存了Tomcat的会话。然后我们对Tomcat实例取下或恢复时，访问用户确实没受影响。

二、配置

本文记录nginx+redis+tomcat实现session共享的过程

nginx安装：http://blog.csdn.net/grhlove123/article/details/47834673

redis安装：http://blog.csdn.net/grhlove123/article/details/47783471

准备两个tomcat，修改相应的端口

名称 IP 端口 tomcat版本 JDK
tomcat1 10.10.49.23 8080 7.0.40 1.7.0_25
tomcat2 10.10.49.15 8081 7.0.40 1.7.0_25

修改nginx.conf加上：

  1. upstream backend {
  2. server 10.10.49.23:8080 max_fails=1 fail_timeout=10s;
  3. server 10.10.49.15:8081 max_fails=1 fail_timeout=10s;
  4. }
<span style="font-size:14px;">    upstream backend {
        server 10.10.49.23:8080 max_fails=1 fail_timeout=10s;
        server 10.10.49.15:8081 max_fails=1 fail_timeout=10s;
    }</span>

修改nginx.conf的location成

  1. location / {
  2. root   html;
  3. index  index.html index.htm;
  4. proxy_pass http://backend;
  5. }
<span style="font-size:14px;">    location / {
        root   html;
        index  index.html index.htm;
        proxy_pass http://backend;
     }
</span>

启动nginx。

下载tomcat-redis-session-manager相应的jar包，主要有三个：

wget https://github.com/downloads/jcoleman/tomcat-redis-session-manager/tomcat-redis-session-manager-1.2-tomcat-7-java-7.jar

wget http://central.maven.org/maven2/redis/clients/jedis/2.5.2/jedis-2.5.2.jar

wget http://central.maven.org/maven2/org/apache/commons/commons-pool2/2.0/commons-pool2-2.0.jar

下载完成后拷贝到$TOMCAT_HOME/lib中

修改两tomcat的context.xml:

  1. <Context>
  2. <!-- Default set of monitored resources -->
  3. <WatchedResource>WEB-INF/web.xml</WatchedResource>
  4. <!-- Uncomment this to disable session persistence across Tomcat restarts -->
  5. <!--
  6. <Manager pathname="" />
  7. -->
  8. <!-- Uncomment this to enable Comet connection tacking (provides events
  9. on session expiration as well as webapp lifecycle) -->
  10. <!--
  11. <Valve className="org.apache.catalina.valves.CometConnectionManagerValve" />
  12. -->
  13. <Valve className="com.orangefunction.tomcat.redissessions.RedisSessionHandlerValve" />
  14. <Manager className="com.orangefunction.tomcat.redissessions.RedisSessionManager"
  15. host="10.10.49.20"
  16. port="6379"
  17. database="0"
  18. maxInactiveInterval="60" />
  19. </Context>
<span style="font-size:14px;"><Context>

    <!-- Default set of monitored resources -->
    <WatchedResource>WEB-INF/web.xml</WatchedResource>

    <!-- Uncomment this to disable session persistence across Tomcat restarts -->
    <!--
    <Manager pathname="" />
    -->

    <!-- Uncomment this to enable Comet connection tacking (provides events
         on session expiration as well as webapp lifecycle) -->
    <!--
    <Valve className="org.apache.catalina.valves.CometConnectionManagerValve" />
    -->

  <Valve className="com.orangefunction.tomcat.redissessions.RedisSessionHandlerValve" />
  <Manager className="com.orangefunction.tomcat.redissessions.RedisSessionManager"
   host="10.10.49.20"
   port="6379"
   database="0"
   maxInactiveInterval="60" />
</Context></span>

在tomcat/webapps/test放一个index.jsp

  1. <%@ page language="java" %>
  2. <html>
  3. <head><title>TomcatA</title></head>
  4. <body>
  5. <table align="centre" border="1">
  6. <tr>
  7. <td>Session ID</td>
  8. <td><%= session.getId() %></td>
  9. </tr>
  10. <tr>
  11. <td>Created on</td>
  12. <td><%= session.getCreationTime() %></td>
  13. </tr>
  14. </table>
  15. </body>
  16. </html>
  17. sessionID:<%=session.getId()%>
  18. <br>
  19. SessionIP:<%=request.getServerName()%>
  20. <br>
  21. SessionPort:<%=request.getServerPort()%>
  22. <%
  23. //为了区分，第二个可以是222
  24. out.println("This is Tomcat Server 1111");
  25. %>
<span style="font-size:14px;"><%@ page language="java" %>
<html>
  <head><title>TomcatA</title></head>
  <body>

    <table align="centre" border="1">
      <tr>
        <td>Session ID</td>
        <td><%= session.getId() %></td>
      </tr>
      <tr>
        <td>Created on</td>
        <td><%= session.getCreationTime() %></td>
     </tr>
    </table>
  </body>
</html>
sessionID:<%=session.getId()%>
<br>
SessionIP:<%=request.getServerName()%>
<br>
SessionPort:<%=request.getServerPort()%>
<%
//为了区分，第二个可以是222
out.println("This is Tomcat Server 1111");
%>  </span>

启动tomcat，发现有异常：com.orangefunction.tomcat.redissessions.RedisSessionHandlerValve 类找不到

分别打开三个jar包，确实没有这个类，解决可以参考：

http://blog.csdn.net/qinxcb/article/details/42041023

通过访问http://10.10.49.20/test/

用Redis存储Tomcat集群的Session实现session共享

刷新：

用Redis存储Tomcat集群的Session实现session共享

可以看到虽然Server从1111变为2222，但session的创建时间没有变化，这就完成了session共享。


上一篇：HttpHandler与HttpModule的用处与区别


下一篇：SimpleHttpServer的学习之UML