APACHE(proxy) + TOMCAT(session复制)实现高可用网站或管理系统集群

hehffyy 2018-05-28

展开全文

1.方案特点

Apache端可选使用sticky session配置负载均衡，是否配置sticky只是影响负载均衡的粒度。
Apache端配置故障转移.
Tomcat端使用官方文档描述的cluster配置，通过多播实现内存方式的session复制，可选使用同步复制和异步复制。

2.建议场景

对于对SESSION强依赖的系统，并且对系统处理能力要求不是太高，只考虑2台TOMCAT作为后端服务的主备方式的情况，这是一种简答的配置。不适合太多的TOMCAT节点，节点越多，复制SESSION的代价会几何方式增加。如：适合小型网站，管理系统，小型业务系统。

3.基础环境安装设置

操作系统环境，APACHE安装，TOMCAT集群安装，TOMCAT测试工程请参见：

http://zp820705./blog/1347417

4.TOMCAT配置

Tomcat集群配置后端Tomcat Server为支持AJP的独立服务，以适应前端Apache配置为粘性会话(sticky-session),Tomcat节点配置Cluster，支持以多播方式进行内存级Session复制。

Tomcat1配置

配置Cluster，使用多播方式同步复制实现节点间session复制。详细配置参数请参见：

http://tomcat./tomcat-6.0-doc/cluster-howto.html

修改server.xml，在Engine节点内，host节点后，加入Cluster配置，如下：

Tomcat-cluster配置代码  
<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"  
                 channelSendOptions="8">  
  
          <Manager className="org.apache.catalina.ha.session.DeltaManager"  
                   expireSessionsOnShutdown="false"  
                   notifyListenersOnReplication="true"/>  
  
          <Channel className="org.apache.catalina.tribes.group.GroupChannel">  
            <Membership className="org.apache.catalina.tribes.membership.McastService"  
                        address="228.0.0.4"  
                        port="45564"  
                        frequency="500"  
                        dropTime="3000"/>  
            <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"  
                      address="auto"  
                      port="4000"  
                      autoBind="100"  
                      selectorTimeout="5000"  
                      maxThreads="6"/>  
  
            <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">  
              <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>  
            </Sender>  
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>  
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>  
          </Channel>  
  
          <Valve className="org.apache.catalina.ha.tcp.ReplicationValve"  
                 filter=""/>  
          <Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>  
  
          <ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/>  
          <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>  
        </Cluster>  

修改Engine节点配置，以支持AJP方式连接

为

完整配置文件请参见：

配置完成保存后，通过SCP命令拷贝到TOMCAT2节点

scp server.xml root@10.10.10.12://opt/apache-tomcat-6.0.33/conf/

Tomcat2配置

Tomcat2的配置基本与TOMCAT1配置相同，唯一不同的只是AJP的jvmRoute参数不同。

修改server.xml中

为：

5.Apache配置

apache的配置方式还是采用vhost方式配置，主配置文件(conf/httpd.conf)引用（include）vhost子配置文件(conf/extra/httpd-vhosts.conf)方式.

Apache的编译请参考：http://zp820705./blog/1347749

apache编译为支持Proxy后的module情况：

Apache配置文件代码  
LoadModule proxy_module modules/mod_proxy.so  
LoadModule proxy_connect_module modules/mod_proxy_connect.so  
LoadModule proxy_ftp_module modules/mod_proxy_ftp.so  
LoadModule proxy_http_module modules/mod_proxy_http.so  
LoadModule proxy_scgi_module modules/mod_proxy_scgi.so  
LoadModule proxy_ajp_module modules/mod_proxy_ajp.so  
LoadModule proxy_balancer_module modules/mod_proxy_balancer.so  
LoadModule ssl_module modules/mod_ssl.so  
LoadModule speling_module modules/mod_speling.so  
LoadModule rewrite_module modules/mod_rewrite.so  

删除主配置文件conf/httpd.conf文件中引用vhost的配置行的注释。

Apache主配置文件代码  
# Virtual hosts  
Include conf/extra/httpd-vhosts.conf  

Apache虚拟主机配置(httpd-vhost.conf)

apache端可以配置sticky-session或no-sticky-session，sticky-session实现的是会话级别的负载均衡，no-sticky-session实现的是请求级别的负载均衡。可以根据实际情况选择配置。

Sticky-session代码  
<VirtualHost *:80>  
    ErrorLog "logs/acooly.org-error_log"  
    LogFormat "%{Host}i %h %l %u %t \"%r\" %s %b" vcommon  
    CustomLog logs/access_log vcommon  
  
    ProxyRequests Off  
    ProxyPreserveHost on  
    # apache+tomcat cluster  
    ProxyPass / balancer://tomcat-cluster/ stickysession=JSESSIONID|jsessionid nofailover=Off  
    ProxyPassReverse / balancer://tomcat-cluster/  
    <Proxy balancer://tomcat-cluster/>  
      BalancerMember ajp://10.10.10.11:8009 loadfactor=1 route=tomcat1  
      BalancerMember ajp://10.10.10.12:8009 loadfactor=1 route=tomcat2  
      ProxySet lbmethod=bybusyness  
    </Proxy>  
</VirtualHost>  

No-sticky-session代码  
<VirtualHost *:80>  
    ErrorLog "logs/acooly.org-error_log"  
    LogFormat "%{Host}i %h %l %u %t \"%r\" %s %b" vcommon  
    CustomLog logs/access_log vcommon  
  
    ProxyRequests Off  
    ProxyPreserveHost on  
    # apache+tomcat cluster  
    ProxyPass / balancer://tomcat-cluster/  
    ProxyPassReverse / balancer://tomcat-cluster/  
    <Proxy balancer://tomcat-cluster/>  
      BalancerMember ajp://10.10.10.11:8009 loadfactor=1 route=tomcat1  
      BalancerMember ajp://10.10.10.12:8009 loadfactor=1 route=tomcat2  
      ProxySet lbmethod=bybusyness  
    </Proxy>  
</VirtualHost>  