`
charyle
  • 浏览: 164560 次
  • 性别: Icon_minigender_1
  • 来自: 天蝎座
社区版块
存档分类
最新评论

Apache+Tomcat集群配置

阅读更多


     本文Apache+Tomcat集群配置 基于最新的Apache和Tomcat,具体是2011年4月20日最新的Tomcat和Apache集群和负载均衡配置。

准备环境

Apache

Apachehttp服务器,我们利用其对Tomcat进行负载均衡。目前最新版本为2.2.17,下载地址为http://httpd.apache.org/download.cgi#apache22。如下图:

 

目前已经出现Apache2.3.11,但是为beta版本,所以没有使用。

下载后直接安装msi即可,如果没有其他的http服务器(iis)则应该可以成功安装,端口即为80,能够访问http://localhost/说明安装成功。

Tomcat

Tocmat7目前已经出现稳定版本的7.0.12Tomcat6则为6.0.32。经我测试,这2个版本的Apache负载均衡配置过程都是一样的,因此下面的配置在Tomcat67集群是通用的。但是按照下面的配置,集群中Tomcat不能既有Tomcat6又有Tomcat7,否则虽能够负载均衡,但不能进行session复制,不知其他方式配置的集群是否可以。

Tomcat就不用怎么介绍了。既然在本地需要多个节点,那么需要下载ZIP版本的Tomcat

JK

JKTomcat提供给http服务器的插件(个人理解的),下载地址为http://mirror.bjtu.edu.cn/apache/tomcat/tomcat-connectors/jk/binaries/win32/jk-1.2.31/。如下图:

 

  

这里选择的是mod_jk-1.2.31-httpd-2.2.3.so,如果http服务器是Apache2.0.X版本,则必须选择mod_jk-1.2.31-httpd-2.0.52.so,页面下方有英文的说明,大家可以看下。

其实我也在网上看到Apache2.2已经集成Tomcat插件模块了,可以不用JK插件就可以实现Tomcat负载均衡,但也需要一些配置,而JK这个配置相比也不复杂,就先记录下来。

配置过程

下面就直接写过程了,我也是网络上学习的,只是总结下过程并且利用最新的ApacheTomcat测试了下,还是与网络上有些不同的。

修改Apache配置

1、修改httpd.conf

我的Apache安装在D:\Program Files\Apache Software Foundation\Apache2.2,找到conf目录下的httpd.conf,在文件的最后一行添加

include "D:\Program Files\Apache Software Foundation\Apache2.2\conf\mod_jk.conf"

2、新建mod_jk.conf文件,内容如下:

LoadModule jk_module modules/mod_jk-1.2.31-httpd-2.2.3.so

JkWorkersFile conf/workers.properties

#指定那些请求交给tomcat处理,"controller"为在workers.propertise里指定的负载分配控制器名

JkMount /*.jsp controller

3、将下载的JK插件mod_jk-1.2.31-httpd-2.2.3.so复制到Apache安装目录的modules目录下。

4、新建并编辑workers.properties文件,内容如下:

#server

worker.list = controller

#========tomcat1========

worker.tomcat1.port=11009

worker.tomcat1.host=localhost

worker.tomcat1.type=ajp13

worker.tomcat1.lbfactor = 1

#========tomcat2========

worker.tomcat2.port=12009

worker.tomcat2.host=localhost

worker.tomcat2.type=ajp13

worker.tomcat2.lbfactor = 1

#========tomcat3========

worker.tomcat3.port=13009

worker.tomcat3.host=192.168.0.80 //在我的虚拟机中的,可以算远程的吧

worker.tomcat3.type=ajp13

worker.tomcat3.lbfactor = 1

 

#========controller,负载均衡控制器========

worker.controller.type=lb

worker.controller.balanced_workers=tomcat1,tomcat2,tomcat3

worker.controller.sticky_session=false

worker.controller.sticky_session_force=1

#worker.controller.sticky_session=1

这里可以配置任意多个Tomcat,此处配置了3Tomat服务器,2个本地,1个远程,所以为了它们都能够顺利启动起来,本地的服务器端口都是不同的,如果Tomcat不再同一机器上,没必要改端口的。

配置Tomcat

配置3Tomcat服务器,将Tomcat解压后复制3份,我将每个文件夹分别命名为Tomcat1Tomcat2Tomcat3,修改每一份的server.xml配置,将Tomcat1中修改部分如下图:

Tomcat2中以上部分的server.xml为:

Tomcat3中以上部分的server.xml为: 

因为Tomat3在远程服务器,所以没必要改端口的,而我先进行的本地集群测试后将Tomcat3复制到远程服务器,所以这3Tomcat端口都不同。

AJP13connectorpoatjvmRoute名称和workers.properties中配置对应。

由于截图面积有限,还需要保证本地2个本地Tomcat配置serverportconnectorhttp1.1port都不相同。

测试

建立测试项目

建立test项目,需要在项目的web.xml中添加<distributable/>

建立test2.jsp,内容如下(网上都用这个测试,我就省的麻烦了)

<%@ page contentType="text/html; charset=GBK" %>

<%@ page import="java.util.*" %>

<html><head><title>Cluster App Test</title></head>

<body>

Server Info:

<%

out.println(request.getLocalAddr() + " : " + request.getLocalPort()+"<br>");%>

<%

  out.println("<br> ID " + session.getId()+"<br>");

  // 如果有新的 Session 属性设置

  String dataName = request.getParameter("dataName");

  if (dataName != null && dataName.length() > 0) {

     String dataValue = request.getParameter("dataValue");

     session.setAttribute(dataName, dataValue);

  }

  out.println("<b>Session 列表</b><br>");

  System.out.println("============================");

  Enumeration e = session.getAttributeNames();

  while (e.hasMoreElements()) {

     String name = (String)e.nextElement();

     String value = session.getAttribute(name).toString();

     out.println( name + " = " + value+"<br>");

         System.out.println( name + " = " + value);

   }

%>

  <form action="test2.jsp" method="POST">

    名称:<input type=text size=20 name="dataName">

     <br>

    :<input type=text size=20 name="dataValue">

     <br>

    <input type=submit>

   </form>

</body>

</html>

上面的测试页面就不解释了,很好理解。

Session测试

将项目部署到3个服务器,然后分别启动Apache3Tocmat服务器,这些Tomcat启动顺序随意,然后打开http://localhost/test/test2.jsp,结果如下图:
 

F5刷新页面,分别出现:

 

多次刷新页面的sessionID看是同一个ID,说明session是复制成功了。那么session中的存储的东西呢,在输入框中分别输入112233后,显示结果如下图: 

 

 

 

 

以上的测试说明,集群中的session已经共享,每个集群对于同一访问均有相同的session,而且session中存储的变量也复制了。

 

节点插拔测试

插拔意思是应该保证当运行的集群中某节点中关闭或者启动时,集群正常工作并且节点能够正常工作。

下面描述测试过程了,贴图太占地方了。

关闭Tomcat2,刷新页面,则不断访问Tocmat1Tomcat3,再关闭Tomcat1后,则只访问一个Tomcat3,说明节点关闭时运行正常。

如果重启Tomcat2,无论怎么刷新,始终访问Tomcat3,难道Apache不能将请求转发给中途启动的Tomcat2?。。。这时利用另外台机器访问页面,发现Tomcat2正常,然后在刷本地页面,又可以访问Tomcat2了。

从上面可以看出Apache的负载均衡时的算法了,对于每个新来的sessionApache按照节点配置中的lbfactor比重选择访问节点,如果某节点node1不能访问,则寻找下一可访问节点,并且将此node1就在该访问session的访问黑名单中,以后该session的访问直接不考虑node1,即使node1又可以访问了。而新来的session是无黑名单的,如果新的session能够访问到node1了,则会将node1在其他所有session访问的黑名单删除,这样其他session就又能访问node1节点了。以上只是个人经过测试后的猜想。

经过以上测试,说明Tomcat集群和负载均衡已经实现了。

 

关于集群我还有些疑问,所以又测试了下,直接把结论写出来:

1.集群下的相同的应用可以名称不同(好像没必要啊),只要配置server.xmlhost下的context具有相同的path即可。

2. 如果应用名称可以不同,那么应用下内容是否可以不同呢(这里考虑将不同应用通过集群看起来是一个应用,并且共享session),然后集群下不同应用映射为相同的访问path,具有相同的路径则负载,如果某路径只某个应用具有,则一直访问该应用。可现实很骨干啊,答案是否定的,至少我以上的配置不能实现。如果访问只有某应用具有的特别路径,那么只有负载到该应用才可以访问,否则直接路径未找到的错误页面了。

 

 

 如果您看过网上其他Apache+Tomcat的集群配置,您可能有的疑问?

1.网上大部分的文章配置2个tocmat的集群,有的将workers.properties下的worker.controller.sticky_session=1,
然后tomcat1中的server.xml中的jvmRoute设置为tomcat2,将tomcat2中的jvmRoute设置为tocmat1,当然我这样设置
也成功了,但是如果3个或者更多tocmat呢,怎么设置每个tomcat的jvmRoute,我不会所以才考虑现在的配置

2.server.xml中的Cluster配置问题,网上大部分都是使用BackupManager方式,即Cluster下又粘贴了一堆配置。其实
只要将其中注释掉的<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"/>去掉注释就完成session的集群
复制了。只是这俩种复制采用的方式不同而已。http://tomcat.apache.org/tomcat-6.0-doc/cluster-howto.html
这页面已经说的挺清楚了,集群的session复制默认是DeltaManager,是all to all的复制,意思是将集群下1个tomcat应用下的session
对所有的集群中的节点进行复制,即使那个节点没有发布应用。显然是不好的方式,但这在小规模的集群下并没神马问题。
而采用BackupManager,就是众多网上配置那样,对于需要复制的节点设置BackupManager自然也没问题,
但是它的性能并没有DeltaManager 好使“ Downside of the BackupManager: not quite as battle tested as the delta manager”。
因此,具体怎么设置就看大家了,通常说如果不是大规模集群,就默认就好了。反正我自己翻译的就是这个意思了,希望没有误导大家。

  • 大小: 58 KB
  • 大小: 119.5 KB
  • 大小: 37.1 KB
  • 大小: 60.4 KB
  • 大小: 61.8 KB
  • 大小: 32.6 KB
  • 大小: 32 KB
  • 大小: 32.6 KB
  • 大小: 32.1 KB
  • 大小: 32.2 KB
  • 大小: 32.3 KB
分享到:
评论
48 楼 毅个混蛋 2014-07-01  
ak121077313 写道
帮lz补充下吧。
如果失败注意下几个地方:

1、
workers.properties
文件里面 是不能用 //来注释的。把注释去掉

2、
不需要每个tomcat下面部署一个
在外面见一个文件夹例如:E:\apache_tomcat\App  然后把test工程放进去

<host></host>里面 加上 <Context path="" docBase="E:\apache_tomcat\App" debug="0"/> 指向上面的地址就行了

3、看下apache启动没有。 如果启动报错就修改
httpd.conf的 Change this to Listen on specific IP addresses as shown below to
下面的
Listen 8080
访问的时候加8080端口



兄台,像你2中这样配置是否就解决了文件上传不能复制的问题了?
47 楼 zongshoujin 2013-09-04  
你好,能问下,这个集群的话是需要系统本身的支持吗?还是说正常的一个web只要放在集群中的tomcat就能实现集群?谢谢!
46 楼 charyle 2011-06-01  
xiaohan1026 写道
请问一下:这样的集群如果系统中存在上传文件之类的话,会把上传的文件都复制到每个tomcat下的应用吗?

不会,需要分布式的文件服务。
45 楼 bluestome 2011-06-01  
支持楼主的无私精神以及专业的态度!
44 楼 xiaohan1026 2011-06-01  
请问一下:这样的集群如果系统中存在上传文件之类的话,会把上传的文件都复制到每个tomcat下的应用吗?
43 楼 sebatinsky 2011-05-20  
标个点,就是从这里开始的
42 楼 wickey 2011-05-13  
日志信息在哪里配置呢?
41 楼 weng 2011-05-02  
我的机器上apache服务器一直就没起来过,装好后start按钮一直是灰色的
40 楼 ericslegend 2011-05-01  
charyle 写道
carcar123 写道
又搞了几个小时,还是不成功

分发没问题,就是session不能同步!!! 真是郁闷

学习就是这样,遇到问题才能把东西学都更深入。换个其他都远程服务器环境,难道Linux下的问题?逐个排除吧。。。不行就休息,别影响假期,或许51回来就可以了。


我也是复制不成功
39 楼 ak121077313 2011-04-29  
静态资源问题找到了。。
http://blog.163.com/java_true/blog/static/1149595252010719115320908/
需要修改htdocs 到指定的目录才能找到资源文件
38 楼 ak121077313 2011-04-29  
还有静态资源怎么处理??

我用的是spring mvc 控制器没有后缀名 所以指定路径的时候要指定静态资源的路径
而其他路径交给tomcat。
37 楼 ak121077313 2011-04-29  
帮lz补充下吧。
如果失败注意下几个地方:

1、
workers.properties
文件里面 是不能用 //来注释的。把注释去掉

2、
不需要每个tomcat下面部署一个
在外面见一个文件夹例如:E:\apache_tomcat\App  然后把test工程放进去

<host></host>里面 加上 <Context path="" docBase="E:\apache_tomcat\App" debug="0"/> 指向上面的地址就行了

3、看下apache启动没有。 如果启动报错就修改
httpd.conf的 Change this to Listen on specific IP addresses as shown below to
下面的
Listen 8080
访问的时候加8080端口
36 楼 clverhack 2011-04-29  
正打算写个这种的呢,写的很不错
35 楼 charyle 2011-04-29  
carcar123 写道
又搞了几个小时,还是不成功

分发没问题,就是session不能同步!!! 真是郁闷

学习就是这样,遇到问题才能把东西学都更深入。换个其他都远程服务器环境,难道Linux下的问题?逐个排除吧。。。不行就休息,别影响假期,或许51回来就可以了。
34 楼 carcar123 2011-04-29  
又搞了几个小时,还是不成功

分发没问题,就是session不能同步!!! 真是郁闷
33 楼 newwpp 2011-04-29  
终于有个写明白的文章
32 楼 iqeq00 2011-04-29  
楼主,去年我也是按照这个方法配置的,虽然出来了
但有1个问题,一直不明白, 如果上传图片来说,
3个tomcat 如何做到文件的同步,网上说有种配置
可以让其他2个tomcat读取1个tomcat的文件
但是这样的话,集群还有意义吗?
31 楼 dukai1008 2011-04-29  
在虚拟机中再增加一个tomcat 试试看
30 楼 charyle 2011-04-29  
carcar123 写道
charyle 写道
carcar123 写道
按你的方式试验了下,发现了一个问题

我用的httpd-2.2.17,tomcat-6.0.29

apache 1个, tomcat 3个( 2个本地,1个是虚拟机 )

。。。。。
请解析下,这是什么原因呢? 本地和远程session ID不一致


楼上的情况我也不清楚了,我的虚拟机中是XP的系统,sessionid也是相同的,但是您试过先启动Apache再启动Tomcat没?

再次感谢各位的赏光啊,我只是总结下Tomcat集群的Apache,目前也是应用层面而已,欢迎大家讨论共同进步。。。



首先:感谢楼主的热心回复,谢谢。
其次:不论启动顺序如何,结果都是一样,ID不同
最后:楼主是否可以解释下
worker.controller.sticky_session=false

worker.controller.sticky_session_force=1

这些参数的意思呢?

sessionID 不一样,意思是没有集成成功?

“worker.loadbalancer.sticky_session=true
此处指定集群是否需要会话复制,如果设为true,则表明为会话粘性,不进行会话复制,于是当某用户的请求第一次分发到哪台Tomcat后,后继的请求会一直分发到此Tomcat服务器上处理;如果设为false,则表明需求会话复制。
worker.loadbalancer.sticky_session_force=true
如果上面的sticky_session设为true时,建议此处也设为true,此参数表明如果集群中某台Tomcat服务器在多次请求没有响应后,是否将当前的请求,转发到其它Tomcat服务器上处理,这就会导致转发到其它Tomcat服务器上的请求,找不到原来的session,所以如果此时请求中有读取session中某些信息的话,就会导致应用的null异常”

这个网上可以搜到的,挺好理解的。

通常我们不用sessionID的,只要session中保存的变量可以复制就算是成功了吧。。。sessionID浏览器也会保存一份在cookies中的,判断是否一次会话,这样的话你的怎么可能不断刷新情况下只有访问到Tomcat3才id不同?。。

另外,您的session添加是怎么添的?我是不同的机器访问模拟的,本地访问然后虚拟机中浏览器访问。再做就要找其他机器或者用本机其他浏览器也可能行了
29 楼 carcar123 2011-04-29  
补充一点:在添加新session的时候 当apache分发到tomcat3,也就是远端的tomcat时,再添加新session,之前的session全部丢失!!! 而tomcat1,tomcat2之间却可以完全copy session,唯独tomcat3不行

很是奇怪啊

相关推荐

Global site tag (gtag.js) - Google Analytics