基于apache的tomcat负载均衡和集群配置

lzstone

浏览: 92619 次
性别:
来自: 大连

最近访客更多访客>>

LotusStar

heerjian

昂科雷xly

zhyue3h

博主相关

博客

微博

相册

留言

关于我

文章分类

社区版块

存档分类

博客分类：

java

Apache Tomcat Glassfish IIS Web

基于apache的tomcat负载均衡和集群配置

1】下载安装

httpd-2.2.15-win32-x86-no_ssl.msi 网页服务器

32-bit Windows zip tomcat

mod_jk-1.2.30-httpd-2.2.3.so Apache/IIS 用来连接后台Tomcat的模块，支持集群和负载均衡

JK 分为两个版本 1,x 和 2.x ，其中 2.x 并不是最新的版本，它是 JK 的另外一个分支，后不知何因没有继续开发，因此2.x 版本已经废弃

安装httpd-2.2.15-win32-x86-no_ssl.msi 到指定目录，我安装的是C:\Program Files\Apache2.2，以后这个目录将用Apache_Home代替

安装tomcat，我是将两个tomcat进行集群，所以安装两个tomcat，路径分别为：F:\tomcat\tomcat1，F:\tomcat\tomcat2，以后这两个目录将用tomcat1_Home,tomcat2_Home代替

2】配置Apache_Home\conf\httpd.conf

在httpd.conf文件的最后一行写入include "C:\Program Files\Apache2.2\conf\mod_jk.conf"

3】配置mod_jk.conf文件

在Apache_Home\conf下建立mod_jk.conf文件

配置内容：

#加载mod_jk Module
LoadModule jk_module modules/mod_jk-1.2.30-httpd-2.2.3.so

         将下载的 mod_jk-1.2.30-httpd-2.2.3.so 文件放入到Apache_Home\modules下
      # 配置 mod_jk
      #加载集群中的workers
         JkWorkersFile conf/workers.properties
      #加载workers的请求处理分配文件
         JkMountFile conf/uriworkermap.properties
    #指定jk的日志输出文件
         JkLogFile logs/mod_jk.log
      #指定日志级别
         JkLogLevel warn
     #指定哪些请求交给tomcat处理,"controller"为在 workers.propertise里指定的负载分配控制器名
         JkMount /* controller

4】配置workers.propertise文件

在Apache_Home\conf下建立workers.propertise文件

配置内容：

       #server 列表
         worker.list=controller,tomcat1,tomcat2
      #========tomcat1========
      #ajp13 端口号，在tomcat下server.xml配置,默认8009
        worker.tomcat1.port=8009
      #tomcat的主机地址，如不为本机，请填写ip地址
        worker.tomcat1.host=localhost
        worker.tomcat1.type=ajp13
     #server的加权比重，值越高，分得的请求越多
        worker.tomcat1.lbfactor=1
     #========tomcat2========
     #ajp13 端口号，在tomcat下server.xml配置,默认8009
       worker.tomcat2.port=9009
     #tomcat的主机地址，如不为本机，请填写ip地址
      worker.tomcat2.host=localhost
      worker.tomcat2.type=ajp13
    #server的加权比重，值越高，分得的请求越多
       worker.tomcat2.lbfactor=1
    #========controller,负载均衡控制器========
    #server名为controller,用于负载均衡
      worker.controller.type=lb
   #重试次数
      worker.retries=3
   #指定分担请求的tomcat
     worker.controller.balanced_workers=tomcat1,tomcat2
   #粘性Session(默认是打开的) 当该属性值=True（或1）时，代表Session是粘性的，即同一Session在集群中的同一个节点上处理，Session不跨越节点。在集群环境中，一般将该值设置为False
     worker.controller.sticky_session=false
#设置用于负载均衡的server的session可否共享有不少文章说设置为1是可以的，也有设置为0才可以的
     worker.controller.sticky_session=1
#worker.controller.sticky_session_force=1
#worker.status.type=status

5】配置uriworkermap.properties文件

在Apache_Home\conf下建立uriworkermap.properties文件

配置内容：

     #所有请求都由controller这个server处理
     /*=controller
     #所有包含jkstatus请求的都由status这个 server处理
     #/jkstatus=status
     #这里的"!”是“非”的意思。
     !/*.gif=controller
     !/*.jpg=controller
     !/*.png=controller
     !/*.css=controller
     !/*.js=controller
     !/*.htm=controller
     !/*.html=controller

6】修改tomcat1_Home\conf\server.xml配置

Starting Coyote HTTP/1.1 on http-8081 默认端口为8080，修改为8081

JK: ajp13 listening on /0.0.0.0:8009 修改端口必须与workers.propertise文件内worker.tomcat1.port=8009一致

需要添加的内容：

上面部分如果需要详细的说明可以看webapps\docs\cluster-howto.html

7】修改tomcat2_Home\conf\server.xml配置

Starting Coyote HTTP/1.1 on http-8082 默认端口为8080，修改为8082

JK: ajp13 listening on /0.0.0.0:9009 修改端口必须与workers.propertise文件内worker.tomcat2.port=9009一致

需要添加的内容：

上面部分如果需要详细的说明可以看webapps\docs\cluster-howto.html

8】session黏贴（共享）方面，如果session中存放的为javabean，javabean必须实现Serializable接口，如果没有实现会报错误 Exception thrown: class java.lang.IllegalArgumentException

9】补充：

看到jameswxx的回复发现确实有欠妥的地方，现在进行改正

在工程的web.xml文件内加入 <distributable/> 标签

标题名不够准确，将原名称“tomcat集群配置流程”更正为“基于apache的tomcat负载均衡和集群配置”

分享到：

iBATIS3中管理SqlSession类 | IE中PNG图片不显示

2010-05-26 14:29
浏览 5606
评论(44)
论坛回复 / 浏览 (42 / 37990)
分类:企业架构
查看更多

44 楼 xiangyufangai 2010-11-09

lzstone 写道

huatu122 写道

老东西了，前几年就会了

确实是老东西了，但是总是会有新人来学习的，只是把配置流程帖出来大家分享一下

是的吗，我就是新人，还不会啊。

43 楼 oujunfeng 2010-10-17

表述得很清晰，并有大量的实例代码，支持！

42 楼 ka520888 2010-10-15

帅哥..我配置了.怎么APACHE启不了请加我qq522196314 谢谢

41 楼 haiyangyiba 2010-06-29

请问下，集群配置成功了，如何部署项目呢？应该不会是将每个tomcat下面都放一份项目吧，还望LZ解答一下。
wwwchendonglisahao@163.com
谢谢。

40 楼 lzstone 2010-06-26

khlee 写道

楼主做过session共享测试吗？
我按照楼主的方式如：在web.xml里加上 <distributable/> 或将
worker.controller.sticky_session改为1或0，或将
worker.controller.sticky_session_force改为1或0，都不能实现session的共享，是怎么回事呢？？？
<Engine name="Catalina" defaultHost="localhost" jvmRoute="tomcat1">已经指定，
Cluster已经打开
Receiver port不同
(负载均衡可以)

有什么异常吗？我第一次测试的时候也不能共享，原因就是对象没有序列化

39 楼 khlee 2010-06-25

38 楼 sailinglxg 2010-06-12

LZ整理出来，很好很强大

37 楼 jw2007 2010-06-09

关于 tomcat+apahce 与 glassfish的比较

以下来源:
http://rrsongzi-gmail-com.iteye.com/blog/234841

2008-08-30
Glassfish 与 tomcat+ apache 负载平衡性能对比
Glassfish是sun出品的免费开源支持J2EE 5的服务器，使用ab进行压力测试，在相同的测试环境下和之上所列出来的apache + tomcat负载平衡的配置相比性能要高出一大截。Tomcat + apache负载平衡，在进行了反复的性能调优之后在我机器上的最好情况时 1000个并发6000次请求经常响应失败，平均花费时间20秒，每秒处理事务数最好情况300-400，cpu占用率基本都是98%。Glassfish原始状态，未进行任何性能调优，通过命令ulimit -SHn 3000修改RH系统最大句柄数为3000，使用ab进行压力测试，参数 –n 6000 –c 1000 完成所有请求仅需3.5秒，每秒事务数将近3000，比tomcat+apache组合高了大约10倍，cpu占用率还要低不少。T+A 组合在-n 6000 –c 1000时候感觉已经比较极限了而glassfish还非常轻松。当使用比较极端的参数 –n 100000 –c 3000 进行测试，运行状态良好，每秒事务数还是能达到2600左右。测试用的环境：red hat 5 Enterprise版， cpu：AMD双核64位3800+，内存2G。

36 楼 jiewo 2010-06-01

tomcat+apche做负载均衡的帖一片又一片~
不过有LZ写的这么细致的还就不多了~
我在人人上面也发表过日志写这个~惭愧啊！
http://blog.renren.com/blog/225364398/460826385

35 楼 babyphone 2010-05-31

heyjava 写道

看到一堆马甲自顶自己文章...无聊

如果同仁也能总结出这样的文章来。
我套N个马甲来顶你。

34 楼 babyphone 2010-05-31

楼主说的很详细。赞一个。

不过有一点需要提醒新人的，比较容易忽略的地方。
mod_jk-1.2.30-httpd-2.2.3.so，引入这个模块的时候需要对应tomcat的版本。如果引入的模块和tomcat的版本不对应，就会报错。

33 楼 nurenok 2010-05-27

<div class="quote_title">lzstone 写道</div>
<div class="quote_div">
基于apache的tomcat负载均衡和集群配置 
1】下载安装 
 <a href="http://httpd.apache.org/download.cgi">httpd-2.2.15-win32-x86-no_ssl.msi</a> 网页服务器 
 <a href="http://labs.renren.com/apache-mirror/tomcat/tomcat-6/v6.0.26/bin/apache-tomcat-6.0.26-windows-x86.zip">32-bit Windows zip tomcat</a> 
 <a href="http://www.apache.org/dist/tomcat/tomcat-connectors/jk/binaries/win32/jk-1.2.30/">mod_jk-1.2.30-httpd-2.2.3.so</a> Apache/IIS 用来连接后台Tomcat的模块，支持集群和负载均衡 
 JK 分为两个版本 1,x 和 2.x ，其中 2.x 并不是最新的版本，它是 JK 的另外一个分支，后不知何因没有继续开发，因此2.x 版本已经废弃 
 安装<a href="http://httpd.apache.org/download.cgi">httpd-2.2.15-win32-x86-no_ssl.msi</a> 到指定目录，我安装的是C:\Program Files\Apache2.2，以后这个目录将用Apache_Home代替 
 安装tomcat，我是将两个tomcat进行集群，所以安装两个tomcat，路径分别为：F:\tomcat\tomcat1，F:\tomcat\tomcat2，以后这两个目录将用tomcat1_Home,tomcat2_Home代替 
2】配置Apache_Home\conf\httpd.conf 
 在httpd.conf文件的最后一行写入include "C:\Program Files\Apache2.2\conf\mod_jk.conf" 
3】配置mod_jk.conf文件 
 在Apache_Home\conf下建立mod_jk.conf文件 
 配置内容： 
 #加载mod_jk Module LoadModule jk_module modules/mod_jk-1.2.30-httpd-2.2.3.so 
 将下载的 <a href="http://www.apache.org/dist/tomcat/tomcat-connectors/jk/binaries/win32/jk-1.2.30/">mod_jk-1.2.30-httpd-2.2.3.so</a> 文件放入到Apache_Home\modules下 # 配置 mod_jk #加载集群中的workers JkWorkersFile conf/workers.properties #加载workers的请求处理分配文件 JkMountFile conf/uriworkermap.properties #指定jk的日志输出文件 JkLogFile logs/mod_jk.log #指定日志级别 JkLogLevel warn #指定哪些请求交给tomcat处理,"controller"为在 workers.propertise里指定的负载分配控制器名 JkMount /* controller 
4】配置workers.propertise文件 
 在Apache_Home\conf下建立workers.propertise文件 
 配置内容： 
 #server 列表 worker.list=controller,tomcat1,tomcat2 #========tomcat1======== #ajp13 端口号，在tomcat下server.xml配置,默认8009 worker.tomcat1.port=8009 #tomcat的主机地址，如不为本机，请填写ip地址 worker.tomcat1.host=localhost worker.tomcat1.type=ajp13 #server的加权比重，值越高，分得的请求越多 worker.tomcat1.lbfactor=1 #========tomcat2======== #ajp13 端口号，在tomcat下server.xml配置,默认8009 worker.tomcat2.port=9009 #tomcat的主机地址，如不为本机，请填写ip地址 worker.tomcat2.host=localhost worker.tomcat2.type=ajp13 #server的加权比重，值越高，分得的请求越多 worker.tomcat2.lbfactor=1 #========controller,负载均衡控制器======== #server名为controller,用于负载均衡 worker.controller.type=lb #重试次数 worker.retries=3 #指定分担请求的tomcat worker.controller.balanced_workers=tomcat1,tomcat2 #粘性Session(默认是打开的) 当该属性值=True（或1）时，代表Session是粘性的，即同一Session在集群中的同一个节点上处理，Session不跨越节点。在集群环境中，一般将该值设置为False worker.controller.sticky_session=false #设置用于负载均衡的server的session可否共享有不少文章说设置为1是可以的，也有设置为0才可以的 worker.controller.sticky_session=1 #worker.controller.sticky_session_force=1 #worker.status.type=status 
5】配置uriworkermap.properties文件 
 在Apache_Home\conf下建立uriworkermap.properties文件 
 配置内容： 
 #所有请求都由controller这个server处理 /*=controller #所有包含jkstatus请求的都由status这个 server处理 #/jkstatus=status #这里的"!”是“非”的意思。 !/*.gif=controller !/*.jpg=controller !/*.png=controller !/*.css=controller !/*.js=controller !/*.htm=controller !/*.html=controller 
6】修改tomcat1_Home\conf\server.xml配置 
 Starting Coyote HTTP/1.1 on http-8081 默认端口为8080，修改为8081 
 <Connector port="8081" protocol="HTTP/1.1" connectionTimeout="20000" redirectPort="8443" /> 
 JK: ajp13 listening on /0.0.0.0:8009 修改端口必须与workers.propertise文件内worker.tomcat1.port=8009一致 
 <Connector port="8009" protocol="AJP/1.3" redirectPort="8443" /> 
 需要添加的内容： 
 <Engine name="Catalina" defaultHost="localhost" jvmRoute="tomcat2">   <Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster" channelSendOptions="8"> <Manager className="org.apache.catalina.ha.session.DeltaManager" expireSessionsOnShutdown="false" notifyListenersOnReplication="true"/> <Channel className="org.apache.catalina.tribes.group.GroupChannel"> <Membership className="org.apache.catalina.tribes.membership.McastService" address="228.0.0.4" port="45564" frequency="500" dropTime="3000"/> <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver" address="auto" port="4000" autoBind="100" selectorTimeout="5000" maxThreads="6"/> <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter"> <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/> </Sender> <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/> <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/> </Channel> <Valve className="org.apache.catalina.ha.tcp.ReplicationValve" filter=""/> <Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>  <ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/> <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/> </Cluster> 
 上面部分如果需要详细的说明可以看webapps\docs\cluster-howto.html 
7】修改tomcat2_Home\conf\server.xml配置 
 Starting Coyote HTTP/1.1 on http-8082 默认端口为8080，修改为8082 
 <Connector port="8082" protocol="HTTP/1.1" connectionTimeout="20000" redirectPort="8443" /> 
 JK: ajp13 listening on /0.0.0.0:9009 修改端口必须与workers.propertise文件内worker.tomcat2.port=9009一致 
 <Connector port="9009" protocol="AJP/1.3" redirectPort="8443" /> 
 需要添加的内容： 
 <Engine name="Catalina" defaultHost="localhost" jvmRoute="tomcat1">   <Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster" channelSendOptions="8"> <Manager className="org.apache.catalina.ha.session.DeltaManager" expireSessionsOnShutdown="false" notifyListenersOnReplication="true"/> <Channel className="org.apache.catalina.tribes.group.GroupChannel"> <Membership className="org.apache.catalina.tribes.membership.McastService" address="228.0.0.4" port="45564" frequency="500" dropTime="3000"/> <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver" address="auto" port="4001" autoBind="100" selectorTimeout="5000" maxThreads="6"/> <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter"> <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/> </Sender> <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/> <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/> </Channel> <Valve className="org.apache.catalina.ha.tcp.ReplicationValve" filter=""/> <Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>  <ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/> <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/> </Cluster> 
 上面部分如果需要详细的说明可以看webapps\docs\cluster-howto.html 
8】session黏贴（共享）方面，如果session中存放的为javabean，javabean必须实现Serializable接口，如果没有实现会报错误 Exception thrown: class java.lang.IllegalArgumentException 

 9】补充：
 
 看到jameswxx的回复发现确实有欠妥的地方，现在进行改正
 在工程的web.xml文件内加入 <distributable/> 标签
 标题名不够准确，将原名称“tomcat集群配置流程”更正为“基于apache的tomcat负载均衡和集群配置”
 


 

 
 
 
 
</div>

32 楼 lzstone 2010-05-27

jw2007 写道

楼主写得好，我想问问，一个软件需要集群这种功能，但是需要如此繁琐的配置，是不是软件设计上本身的失败。glassfish集群应该比tomcat集群简单吧?

我感觉是服务器的并发能力有限，需要集群的方式进行分担，提高效率，软件设计方面出现的失败，集群并不能最最终解决

glassfish的集群确实很完善，tomcat配置上有些凌乱

31 楼 jw2007 2010-05-27

楼主写得好，我想问问，一个软件需要集群这种功能，但是需要如此繁琐的配置，是不是软件设计上本身的失败。glassfish集群应该比tomcat集群简单吧?

30 楼 lnaigg 2010-05-27

非常好的东西，mark了

29 楼 254985319 2010-05-27

不错，学习了，最近也在配这个，老是出现jk和tomcat无法通信，最后发现是worker.tomcat1.port指定成了tomcat的端口，郁闷死！~

28 楼 huatu122 2010-05-27

25262875 写道

huatu122 写道

take 写道

huatu122 写道

老东西了，前几年就会了

看来这位是个鼻祖级人物啊.!

鼻祖不敢，apache官方文档写的比这个还要清楚

皮痒了，专业找攻击的。。哎。

我实话实说，不愿意听拉到

27 楼 lzstone 2010-05-27

coffeesweet 写道

讲的确实很详细，不知道楼主配没配过iis+tomcat的?

Tomcat6+IIS6 集成及Tomcat负载均衡与Tomcat集群配置这个是在网上看的一篇文章，没有真正的配置过
连接地址：http://www.cnblogs.com/top5/archive/2009/10/26/1589872.html
希望对你有所帮助

26 楼 tanqimin 2010-05-27

楼主，不同的服务器之间，Tomcat集群如何建立？

25 楼 changkunyang 2010-05-27

好文，楼主辛苦了。

发表评论

您还没有登录,请您登录后再发表评论

最近访客更多访客>>

博主相关

文章分类

社区版块

存档分类

最新评论