文档章节

Tomcat集群方案

nubo
 nubo
发布于 2013/03/01 16:58
字数 1158
阅读 6.7W
收藏 109

一、 需求

多个tomcat要一起协同工作有几种办法,可以考虑的方案有以下几个:

1. 使用tomcat自带的cluster方式,多个tomcat间自动实时复制session信息,配置起来很简单。但这个方案的效率比较低,在大并发下表现并不好。

2. 利用nginx的基于访问ip的hash路由策略,保证访问的ip始终被路由到同一个tomcat上,这个配置更简单。但如果应用是某一个局域网大量用户同时登录,这样负载均衡就没什么作用了。

3. 利用memcached把多个tomcat的session集中管理,前端在利用nginx负载均衡和动静态资源分离,在兼顾系统水平扩展的同时又能保证较高的性能。

这里选择方案3。

二、环境

系统:Linux

软件:nginx-1.2.7,memcached-1.4.15,tomcat7。

依赖:libevent-2.0.21-stable(memcached),

asm-3.2.jar

minlog-1.2.jar

reflectasm-1.0.jar

kryo-1.03.jar

kryo-serializers-0.9.jar(如果在官方下载的有问题,我就遇到缺少了DateSerializer类,请自己去git上打包:https://github.com/magro/kryo-serializers)

memcached-session-manager-1.6.3.jar

memcached-session-manager-tc7-1.6.3.jar

memcached-session-manager-tc6-1.6.3.jar

msm-kryo-serializer-1.6.3.jar

spymemcached-2.8.4.jar

三、搭建

1.Memcached(官网:http://memcached.org/):

tar zxvf libevent-2.0.21-stable.tar.gz

cd libevent-2.0.21-stable

./configure --prefix=/desp/local/libevent-2.0.21

make

make install

-------------------------------------------------------------------

tar zxvf memcached-1.4.15.tar.gz

cd memcached-1.4.15

./configure --prefix=/desp/local/memcached-1.4.15 --with-libevent=/desp/local/libevent-2.0.21/

make

make install

2.Ngnix(如想安装其他模块,请参考官网:http://nginx.org/cn/):

tar zxvf nginx-1.2.7.tar.gz

cd nginx-1.2.7

./configure --prefix=/desp/ nginx/

make

make install

修改nginx.conf(http://nginx.org/cn/docs/

 

#user  nobody; 
worker_processes	16; 
pid	sbin/nginx.pid; 
worker_rlimit_nofile 51200;
 
events { 
    use epoll; 
    worker_connections  65535; 
} 
 
 
http { 
    include       mime.types; 
    default_type  application/octet-stream; 
 
    #log_format  main  '$remote_addr - $remote_user [$time_local] "$request" ' 
    #                  '$status $body_bytes_sent "$http_referer" ' 
    #                  '"$http_user_agent" "$http_x_forwarded_for"'; 
 
    #access_log  logs/access.log  main; 
 
    client_header_buffer_size 32k; 
    large_client_header_buffers 4 32k; 
    client_max_body_size 20m; 
    client_body_buffer_size 128k; 
 
    sendfile        on; 
    tcp_nopush     on; 
 
    #keepalive_timeout  0; 
    keepalive_timeout  65; 
 
    gzip  on; 
    gzip_types       text/javascript text/plain text/css application/xml application/x-javascript;
    gzip_disable     "MSIE [1-6]\.(?!.*SV1)"; 
 
    proxy_connect_timeout 300; 
    proxy_send_timeout 300; 
    proxy_read_timeout 300; 
    proxy_buffer_size 16k; 
    proxy_buffers 4 32k; 
 
    proxy_set_header X-Forwarded-For $remote_addr; 
    proxy_set_header Connection Close; 
    server_names_hash_max_size 1024; 
    server_names_hash_bucket_size 1024; 
 
    # Default cache parameters for use by virtual hosts 
    # Set the cache path to tmpfs mounted disk, and the zone name 
    # Set the maximum size of the on disk cache to less than the tmpfs file system size 
    proxy_cache_path  ./cache  levels=1:2  keys_zone=pscms:100m max_size=800m; 
    proxy_temp_path   ./proxy; 
	
	log_format  main  	'$remote_addr - $remote_user [$time_local] "$request" ' 
						'$status $body_bytes_sent "$http_referer" ' 
						'"$http_user_agent" "$http_x_forwarded_for"'; 
 
    #配置后端服务器信息 
    upstream web_server { 
        #ip_hash; 
        server 172.168.1.222:8080 max_fails=3  fail_timeout=30s; 
        server 172.168.1.222:8081 max_fails=3  fail_timeout=30s; 
    } 
 
    server { 
        listen   8888; ## listen for ipv4 
        #listen   [::]:80 default ipv6only=on; ## listen for ipv6 
        server_name  172.168.1.221; 
 
        charset utf-8; 

        access_log  logs/host.access.log  main; 
        #access_log off; 
 
        location ~ .*\.(jsp|action)?$ { 
            proxy_set_header Host $http_host; 
            proxy_redirect     off; 
            proxy_pass         http://web_server; 
            proxy_set_header   Host             $host; 
            proxy_set_header   X-Real-IP        $remote_addr; 
            proxy_set_header   X-Forwarded-For $proxy_add_x_forwarded_for; 
        } 
 
        location ~ .*\.(gif|jpg|jpeg|png|bmp|swf|js|css)$ { 
            #如果后端的服务器返回502、504、执行超时等错误,自动将请求转发到upstream负载均衡池中的另一台服务器,实现故障转移。 
            proxy_next_upstream http_502 http_504 error timeout invalid_header; 
 
            proxy_cache pscms;                   #进行缓存,使用Web缓存区cache_one 
            proxy_cache_valid 200 304 1h;           #对不同的HTTP状态码设置不同的缓存时间 
            proxy_cache_valid 301 302 5m; 
            proxy_cache_valid any 1m; 
            proxy_set_header  Host $host; 
            proxy_set_header  X-Real-IP  $remote_addr; 
            proxy_set_header X-Forwarded-For $remote_addr; 
            proxy_set_header Accept-Encoding "";  #(或是后台服务器关闭gzip),这样这台机器才不会缓存被压缩的文件,造成乱码 
            proxy_ignore_headers "Cache-Control" "Expires"; #这段配置加上后,proxy_cache就能支持后台设定的expires。 
            proxy_pass http://web_server; 
            expires  15m; 
        } 
 
        location / { 
            proxy_set_header Host $http_host; 
            proxy_redirect     off; 
            proxy_pass         http://web_server; 
            proxy_set_header   Host             $host; 
            proxy_set_header   X-Real-IP        $remote_addr; 
            proxy_set_header   X-Forwarded-For $proxy_add_x_forwarded_for; 
        } 
 
    } 
 
}

3.tomcat

把asm-3.2.jar,minlog-1.2.jar,reflectasm-1.0.jar,kryo-1.03.jar,kryo-serializers-0.9.jar,memcached-session-manager-1.6.3.jar,memcached-session-manager-tc7-1.6.3.jar(有6、7两个jar分别对应tomcat6、7),msm-kryo-serializer-1.6.3.jar,spymemcached-2.8.4.jar放到tomcat/lib/下.

修改context.xml或者server.xml:

 <Engine name="Catalina" defaultHost="localhost" jvmRoute="jvm1">

jvmroute就是给memcached的标识。

<Manager className="de.javakaffee.web.msm.MemcachedBackupSessionManager" 

memcachedNodes="n1:172.168.1.221:11211"           

requestUriIgnorePattern=".*\.(png|gif|jpg|css|js|ico|jpeg|htm|html)$" 

sessionBackupAsync="false" 

sessionBackupTimeout="1800000" 

copyCollectionsForSerialization="false" 

transcoderFactoryClass="de.javakaffee.web.msm.serializer.kryo.KryoTranscoderFactory"

/>

更多选项请查看:https://github.com/magro/memcached-session-manager/wiki/SetupAndConfiguration

此项目地址:https://github.com/magro/memcached-session-manager

四:原理

原文:http://xylonwang.iteye.com/blog/1269704http://miwucc.iteye.com/blog/1329729

MSM(memcached-session-manager) 支持tomcat6 和tomcat7 ,利用 Value(Tomcat 阀)对Request进行跟踪。Request请求到来时,从memcached加载session,Request请求结束时,将tomcat session更新至memcached,以达到session共享之目的, 支持 sticky  和 non-sticky 模式。

1.Sticky 模式:

tomcat session 为主session,memcached 为备session。Request请求到来时, 从memcached加载备 session 到 tomcat (仅当tomcat jvmroute发生变化时,否则直接取tomcat session);Request请求结束时,将tomcat session更新至memcached,以达到主备同步之目的。


 

2.Non-Sticky模式:

tomcat session 为 中转session, memcached1 为主 session,memcached 2 为备session。Request请求到来时,从memcached 2加载备 session 到 tomcat,(当 容器 中还是没有session 则从memcached1加载主 session 到 tomcat, 这种情况是只有一个memcached节点,或者有memcached1 出错时),Request请求结束时,将tomcat session更新至 主memcached1和备memcached2,并且清除tomcat session 。以达到主备同步之目的。

© 著作权归作者所有

nubo
粉丝 18
博文 14
码字总数 5911
作品 0
长沙
高级程序员
私信 提问
加载中

评论(6)

redmaple
redmaple
学习了79
whaon
whaon
不错哦
素人派
素人派
学习了。
http://surenpi.com
nubo
nubo 博主

引用来自“szu_吴鹏”的评论

缺少了DateSerializer类,请自己去git上打包:https://github.com/magro/kryo-serializers) ,能具体点吗,我现在遇到这个问题,tomcat启动一直说缺少这个类。

https://github.com/magro/kryo-serializers/blob/master/src/main/java/de/javakaffee/kryoserializers/DateSerializer.java
szu_吴鹏
szu_吴鹏
缺少了DateSerializer类,请自己去git上打包:https://github.com/magro/kryo-serializers) ,能具体点吗,我现在遇到这个问题,tomcat启动一直说缺少这个类。
luke0202
luke0202
收藏了先。
Memcached高可用方案收集(集群及分布式)

Memcached的集群方案有很多,不止magent一个,但是单靠集群软件去实现高可用感觉还是会缺少一步,最推荐的方案应该是软件加编码去实现高可用,至少能保证站点的99.5%的可运行行,以下是集群的...

easonjim
2017/09/23
0
0
分布式Session集中存储方案

在文章分布式web架构中Session管理的方法中讲了分布式Session管理的4种办法,其中第4种的Session集中存储实际运用比较广泛,下面来讲解这种的实现方案。 目前常用的Session集中管理方案有两种...

刘诗书
2017/11/23
0
0
ssm(Spring、Springmvc、Mybatis)实战之淘淘商城-第十天(非原创)

文章大纲 一、课程介绍 二、单点登录系统分析 三、单点登录系统代码实战 四、项目源码与资料下载 五、参考文章 一、课程介绍 一共14天课程 (1)第一天:电商行业的背景。淘淘商城的介绍。搭...

osc_6ew996ka
2019/05/15
5
0
集群环境配置Tomcat的bindOnInit参数控制在完全启动后才接受Request请求

在Tomcat+Nginx集群部署运行的过程发现个问题,假如集群配置两个TomcatA和TomcatB并且TomcatB作为backup模式运行, 假如TomcatB重启更新完版本,做完AB测试验证后。 此时关闭重新启动TomcatA...

EntDIY
2014/05/16
591
0
对单机架构升级集群架构的工作记录

概述 还有公司敢用单机模式架构,狠狠的擦了一把汗。。在此萌生了改造单机架构模式,自行网上搜索出一套适合公司的高可用架构,才大致了解完毕。领导就召集大家说了现有单机模式的弊端。。 ...

java_龙
2017/06/22
180
0

没有更多内容

加载失败,请刷新页面

加载更多

QEMU、KVM、libvirt三者间的关系

QEMU QEMU提供了一个开源的服务器全虚拟化解决方案,它可以使你在特定平台的物理机上模拟出其它平台的处理器,比如在X86 CPU上虚拟出Power的CPU,此时的Guest OS感觉不到虚拟机的存在,就像运行在...

osc_7ludm6s2
13分钟前
9
0
QEMU和KVM的关系

KVM是指在CPU硬件支持基础之上的虚拟化技术。没有CPU硬件虚拟化的支持,KVM是无法工作的。 准确来说,KVM是Linux的一个模块。可以用modprobe去加载KVM模块。加载了模块后(kvm和kvm-intel模块...

osc_3ytpwpyb
14分钟前
3
0
thymeleaf语法(二)

<span th:if="$(user.age) eq 23"></span> 运算符: gt  :great than  (大于)  > ge  :great equal  (大于等于)  >= eq  :equal  (等于)  = lt  :less than  (小于) ......

osc_nt0jrqne
16分钟前
3
0
送给发烧友:Python条件语句的七种写法T

有的人说 Python 入门容易,但是精通难的语言,这点我非常赞同。Python 语言里有许多(而且是越来越多)的高级特性,是 Python 发烧友们非常喜欢的。在这些人的眼里,能够写出那些一般开发者...

osc_0kdyznad
17分钟前
11
0
人物-企业家:车建新

ylbtech-人物-企业家:车建新 车建新 ,男,1966年6月18日生于江苏省常州市,红星美凯龙家居集团股份有限公司(Red Star Macalline Group Corporation Ltd.)董事长兼CEO,并担任全国工商联执...

osc_z2ru77w0
19分钟前
11
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部