文档章节

企业网站架构之Nginx+tomcat+memcached集群

Andy-xu
 Andy-xu
发布于 2014/08/11 14:39
字数 1490
阅读 1883
收藏 24
点赞 3
评论 0

nginx+tomcat+memcached应用

系统环境:RHEL6.4  x64   iptables -F   and selinux is disabled

主机角色:node1 :192.168.0.24 :lnmp环境 tomcat memcached

         node2 :192.168.0.99 : tomcat memcached

软件下载:lnmp环境上测试tomcat,使用nginx简单发布jsp

 jdk-6u32-linux-x64.bin apache-tomcat-7.0.37.tar.gz

https://code.google.com/memcached-session-manager        memcachedsession管理


   Nginx(lnmp)

  /         \

<T1>       <T2>

;    \    /      ;

;      \/        ;      

;      /\        ;

;    /    \      ;

<M1>       <M2>

Tomcat1session存储在memcacted2.tomcatMemcached使用交叉存储,只有当M2不可用时T1才将数据存储在M1(M1T1failoverNode),使用这种方式可以避免单点故障.从而实现应用的高可用性.


注意:两台node上的tomcat应用完全一致


1.在两台node主机上配置tomcat环境

#sh jdk-6u32-linux-x64.bin

# mv jdk1.6.0_32/ /usr/local/lnmp/jdk

这个不是必须的,看自己的习惯哦

#vim /etc/profile              编写环境变量

export JAVA_HOME=/usr/local/lnmp/jdk

export CLASSPATH=.:$JAVA_HOME/lib:$JAVA_HOME/jre/lib

export PATH=$PATH:$JAVA_HOME/bin

#source /etc/profile

#which javac


#which java

#vim test.java

public class test{

public static void main(String[] args)

{System.out.println("Hello!");  }

}

#javac test.java          编译

#java test                   执行后出现Hello!说名java环境配置好


安装tomcat服务器

#tar zxf apache-tomcat-7.0.37.tar.gz      解压就能用,不需要编译

#mv apache-tomcat-7.0.37 tomcat

#/root/tomcat/webapps/ROOT                          tomcat的默认发布目录

#/root/tomcat/bin/startup.sh(shutdown.sh)       tomcat默认的启动和关闭脚本


tomcat默认开启8080端口,

测试http://192.168.0.24:8080   访问到tomcat默认的测试页


#cd tomcat/webapps/ROOT            自写测试页

#vim test.jsp

this time is: <%=new java.util.Date()%>

测试访问;http://192.168.0.24:8080   显示当前时间

tomcat访问每次得8080端口,使用nginx反向代理一下。


使用nginx发布jsp动态网页:

修改nginx配置文件:vim /usr/local/lnmp/nginx/conf/nginx.conf

location ~ \.jsp$ {

proxy_pass http://127.0.0.1:8080;

}

nginx -t && nginx -s reload

访问:http://192.168.0.24/test.jsp




同步两台tomcat的内容

#scp tomcat/ jdk/ 192.168.0.99:

修改java环境变量/etc/profile

启动tomcat服务,并且编写可以识别的脚本

测试:http//192.168.0.998080/test.jsp

两台node(tomcat)准备好了


2.node1上的nginx环境中发布网页

使用nginx的负载均衡功能,

http块中加

upstream linux {

server 192.168.0.24:8080;

server 192.168.0.99:8080;

}

location ~ \.jsp$ {

proxy_pass http://linux;

}

nginx -t && nginx -s reload  


测试:http//lnmp.xxb.com/test.jsp      实现两台主机的负载均衡

lnmp.xxb.com对应的是nginx(24)主机

问题:在后台实现了nginx的负载均衡,但是当一个用户刷新数据时,数据总是变化的,试想,在动态页面,如果用户提交数据刷新后会换成另外一个空面,这样会造成一定的损失

解决:nginx增加一个sticky模块.(需要重新编译nginx)


重新在nginx在进行模块化编译:

download:nginx-sticky-modules.tar.gz(解压就行)

#cd nginx-1.4.2/

# ./configure --prefix=/usr/local/lnmp/nginx --with-http_ssl_module --with-http_stub_status_module --add-module=/root/nginx-sticky-module-1.0


#make && make install

vim nginx.conf

upstream linux {

sticky;

装了nginx-sticky后的功能

server 192.168.0.99:8080 ;

server 192.168.0.24:8080 ;

}

测试:http://lnmp.xxb.com/test.jsp 后发现刷新不会来回负载(每个用户看到的其实不是一个tomcat上的数据,但是对用户是透明的)



3.nginx负载tomcatjsp,需要解决session共享:

使用memcache进行缓存(用户)后端数据,但是又要想到解决单点故障问题,因而可以采用两台memcache作为后端负载.


memcached 11211 后端使用交叉试存储(tomcat会将session同步,session自动寻找存储的memcached,但是默认是交叉存储,m坏掉,tomcat都会存到存活的m)

只要tomcat不会宕掉,一切数据都还ok

但是当memcached宕掉,tomcat会向存活的mem上存取

session 的序列化方案官方推荐的有 4 :

1. java serialization

2. msm-kryo-serializer

3. msm-javolution-serializer

4. msm-xstream-serializer

其中性能最好的数Kryo,我们使用kryo来做session


mecached服务器node1 and node2

#yum install memcached -y

#/etc/init.d/memcached restart

memcached默认开启11211端口


测试访问:telnet localhost 11211

stats                   查看状态

set user 0 0 3    存储新值(add replace)

get user             获取值



配置两台memcached服务器(tomcat),下载jar(必须支持相关的java程序)

kryo-1.03.jar

kryo-serializers-0.8.jar

memcached-2.5.jar

memcached-session-manager-1.5.1.jar

memcached-session-manager-tc7-1.5.1.jar

minlog-1.2.jar

msm-kryo-serializer-1.5.1.jar

reflectasm-0.9.jar


node1 and node2 同步的内容哦

#cd tomcat/lib/


#mget jar/*    下载tomcatsession共享管理

#cd tomcat/conf/

# vim context.xml

<Manager className="de.javakaffee.web.msm.MemcachedBackupSessionManager"

memcachedNodes="n1:192.168.0.24:11211,n2:192.168.0.99:11211"

failoverNodes="n1"       失败时存到n1,正常时交互存储;tomcat2需要变n2

requestUriIgnorePattern=".*\.(ico|png|gif|jpg|css|js)$" transcoderFactoryClass="de.javakaffee.web.msm.serializer.kryo.KryoTranscoderFactory"

/>


#tomcat/bin/.sthudown.sh 关闭tomcat后重启,以识别memcached-session-manager

# tail -f logs/catalina.out    默认日志

INFO: MemcachedSessionService finished initialization, sticky true, operation timeout 1000, with node ids [n2] and failover node ids [n1]

正常启动




编辑测试文件:

(动态效果的jsp网页)

# vim tomcat/webapps/ROOT/test.jsp             提交用户信息的测试页

<%@ page contentType="text/html; charset=GBK" %>

<%@ page import="java.util.*" %>

<html><head><title>Cluster App Test</title></head>

<body>

Server Info:

<%

out.println(request.getLocalAddr() + " : " + request.getLocalPort()+"<br>");%>

<%

out.println("<br> ID " + session.getId()+"<br>");

String dataName = request.getParameter("dataName");

if (dataName != null && dataName.length() > 0) {

String dataValue = request.getParameter("dataValue");

session.setAttribute(dataName, dataValue);

}

out.print("<b>Session list</b>");

Enumeration e = session.getAttributeNames();

while (e.hasMoreElements()) {

String name = (String)e.nextElement();

String value = session.getAttribute(name).toString();

out.println( name + " = " + value+"<br>");

System.out.println( name + " = " + value);

}

%>

<form action="test.jsp" method="POST">

name:<input type=text size=20 name="dataName">

<br>

key:<input type=text size=20 name="dataValue">

<br>

<input type=submit>

</form>

</body>

</html>


session共享完成:两台tomcatmemcached机子做相同的配置(jdk,memcache,tomcat)


测试:

http://lnmp.xxb.com/test.jsp     使用一台tomcat和另外一台的memcached进行session共享

当任何一台tomcat或者memcached挂了都无所谓

session会记录并且保持用户的数据信息

图1:

访问node1数据默认存在node2memcached,但是node1上能看见数据

图2

可以看见,当访问node1的时候默认放数据是在node2上的

图3:










                                                                                                                                                                                                 

                                                                                         http://my.oschina.net/xxbAndy/blog

                                                                                                        weichuangxxb@sina.cn


© 著作权归作者所有

共有 人打赏支持
Andy-xu
粉丝 109
博文 95
码字总数 179246
作品 0
大兴
运维
nginx+tomcat+memcached集群后请问若是使用了application还会全局共享吗

nginx+tomcat+memcached集群后请问若是使用了application还会全局共享吗?session通过memcached可以共享了,但是memcached呢,处于不同的tomcat中...

杨某某
2013/01/14
1K
2
关于nginx+tomcat+memcached集群中session的问题

在解决nginx+tomcat+memcached集群session的问题中,我在本机(Windows)测试,nginx+2个tomcat,将memcached添加到系统服务中并启动,分别添加memcached的jar包到tomcat的lib中,配置两个tom...

IceRainYWC
2012/09/05
7.4K
11
Nginx+Tomcat+Memcached实现会话保持

会话保持的三种方式 Session sticky会话绑定:通过在前端调度器的配置中实现统一session发送至同一后发端服务器 Session cluster会话集群:通过配置Tomcat保持所有Tomcat的session的信息一致...

甩锅侠
2017/11/18
0
0
OSC 第 116 期高手问答 -- Web 集群实战

OSCHINA 本期高手问答(4月12日- 4月20日)我们请来了@老男孩oldboy为大家解答关于Web集群实战方面的问题。 @老男孩oldboy ,老男孩,北京老男孩IT教育创始人,拥有十多年一线大规模网站集群运...

催呀催呀
2016/04/12
5.4K
42
Linux下nginx+tomcat+memcached集群

集群分为横向集群和纵向集群(纵向意思就是在一台服务器上 横向就是多台服务器 就这么个意思) 一、软件版本 nginx-0.7.65 apache-tomcat-6.0.26 jdk-6u20-linux-i586-rpm.bin memcached-1....

sjfengOS
2013/04/24
0
1
民工哥公众号linux系统学习线路图大全

民工哥公众号linux系统学习线路图大全 <-----------点击链接进入 友侃有笑公众号Linux学习路线图 1、基础篇 Linux 基础优化配置 Linux系统根目录结构介绍 linux系统重要子目录介绍 Linux文件...

民工哥
2017/08/30
0
0
OSChina 第 15 期高手问答,主题:高性能 Linux

本期高手问答,荣幸请到 《构建高可用Linux服务器》 一书的作者——余洪春(@抚琴煮酒 )来 OSCHINA 做客,欢迎大家对基于实际生产环境,从Linux虚拟化、集群、服务器故障诊断与排除、系统安全...

红薯
2012/04/21
8.9K
34
新书《Linux集群和自动化运维》目录

推荐序一 在全球“互联网+”的大背景下,互联网创业企业的数量如雨后春笋般大量产生并得到了快速发展!对“互联网+”最有力的支撑就是Linux运维架构师、云计算和大数据工程师,以及自动化开...

抚琴煮酒
2016/08/17
0
0
企业实战(2)-实现基于LVS负载均衡集群的电商网站架构

企业实战:逐步实现企业各种情景下的需求 企业情景二:随着业务的发展,网站的访问量越来越大,网站访问量已经从原来的1000QPS,变为3000QPS,网站已经不堪重负,响应缓慢,面对此场景,单纯...

青奚
2017/11/13
0
0
VMware发布Serengeti项目,支持云中部署Hadoop

全球虚拟化和云基础架构领导厂商VMware公司今天公布了最新开源项目——Serengeti,支持企业能够在 虚拟和云环境中快速部署、管理和扩展Apache Hadoop。此外,VMware与Apache Hadoop社区共同合...

oschina
2012/06/15
1K
1

没有更多内容

加载失败,请刷新页面

加载更多

下一页

Spring+jpaNo transactional EntityManager available

TransactionRequiredException: No transactional EntityManager availableEntityManager执行以下方法(refresh, persist, flush, joinTransaction, remove, merge) 都需要需要事务i......

wpfc
5分钟前
0
0
八幅漫画理解使用JSON Web Token设计单点登录系统

八幅漫画理解使用JSON Web Token设计单点登录系统 Sep 07, 2015 in Engineering 上次在《JSON Web Token - 在Web应用间安全地传递信息》中我提到了JSON Web Token可以用来设计单点登录系统。...

祖冲之
7分钟前
0
0
Spring框架中的设计模式(三)

Spring框架中的设计模式(三) 原创: 瑞查德-Jack 在之前的两篇文章中,我们看到了一些在Spring框架中实现的设计模式。这一次我们会发现这个流行框架使用的3种新模式。 本文将从描述两个创意...

瑞查德-Jack
11分钟前
0
0
[MicroPython]TPYBoard智能小车“飞奔的TPYBoard装甲一号”

智能小车作为现代的新发明,是以后的发展方向,他可以按照预先设定的模式在一个环境里自动的运作,不需要人为的管理,可应用于科学勘探等等的用途。智能小车能够实时显示时间、速度、里程,具...

bodasisiter
12分钟前
0
0
桌面虚拟化VDI(Virtual Desktop Infrastructure)

为了保证员工(客户)不把公司的资料复制、传输给别人。可以把员工平时办公放在服务器上做。所以使用桌面虚拟化。就是把一个服务器虚拟出很多桌面系统(如:windows)。 桌面虚拟化最大的优势...

王坤charlie
20分钟前
2
0
自我审视及职业规划

啊哈,不知不觉已经工作了3年了。程序员作为一门技术工作,如果分级的话我的能力如何呢?该怎么提升呢? 话说,我现在的能力属于中低级的层次吧,努力在向高级努力。为什么这么说呢: 因为我觉...

一口今心
22分钟前
1
0
《PHP和MySQL Web 开发》 第12章 MySQL高级管理

我决定好好写学习笔记了,对应上书上的目录和重要信息。不瞎jb写了。从这章开始吧,然后之前写的会编辑后重发。嗯,就酱。 12.1 深入理解权限系统 妈蛋 开头就卡住了。。。我先回去修改之前的...

十万猛虎下画山
23分钟前
1
0
Python 3.6:多态的实现

多态的作用不用多说,C++用如下条件来实现多态: 要有继承 要有虚函数函数重写 要有父类指针(父类引用)指向子类对象 实际上C++使用VPTR指针来完成这个事情,其是设计模式的基础,软件分层的基...

全部原谅
23分钟前
0
0
纯Python实现鸢尾属植物数据集神经网络模型[图]

纯Python实现鸢尾属植物数据集神经网络模型[图]: 尝试使用过各大公司推出的植物识别APP吗?比如微软识花、花伴侣等这些APP。当你看到一朵不知道学名的花时,只需要打开植物识别APP,拍摄一张...

原创小博客
25分钟前
1
0
2018安卓巴士开发者大会打造Android技术盛宴

2018安卓巴士开发者大会打造Android技术盛宴2018安卓巴士开发者大会将于8月25日在上海举行,作为中国最具前沿性、专业性的安卓技术会议,将邀请来自爱奇艺、阿里、饿了么等知名企业的一线工程...

逆鳞龙
27分钟前
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部