写在前面

apache配置多个tomcat,实现请求分流,多个tomcat服务均衡负载,增加服务的可靠性。最近研究了一下,遇到许多问题,记录一下,方便以后查阅,不喜欢apache,nginx也是可以做到的。

准备

版本很重要,我就是由于版本原因,一直报错

linux

使用 #lsb_release -a查看当前linux系统版本。

本例:CentOS Linux release 7.0.1406 (Core)

jdk

使用 # java -version查看当前版本,如果没有,先装好。download link

本例:java version “1.7.0_80”

tomcat

查看解压安装位置。download link

本例:apache-tomcat-7.0.69.tar.gz

apache

在linux系统中,apache服务主程序就是httpd,所以名称也是httpd。使用 #httpd -version查看当前版本。这里是使用yum安装download link

本例:Apache/2.4.6 (CentOS)

tomcat-connectors

tomcat-connectors是用来连接apache和tomcat的插件包,这个版本很重要,就是在找这个上面花了很长时间,主要是为了使用其编译好的mod_jk.so 文件。在Apache 2.2.x 时可以直接下载 mod_jk-1.2.31-httpd-2.2.x.so

官方:mod_jk-1.2.31-httpd-2.2.x.so is for Apache 2.2.x. It has been build against version 2.2.3, but should work with Apache 2.2.0 and later. Rename to mod_jk.so before putting it in your modules directory or adjust your LoadModule statement.

但是我使用的是Apache 2.4.6,使用yum安装时,会默认安装最新版本,#yum list httpd查询时只有这一个。 
所以这里要去下载新的中间包,并且需要编译。download link

本例:tomcat-connectors-1.2.42-src.tar.gz

安装

将这些软件包,放置在一个文件夹下,我是放在 /home下。这里主要的安装是Apache安装,我这里使用yum安装:

  • #yum list httpd #查看可安装版本列表
  • #yum install httpd #默认安装
  • httpd -v #安装结束,查看安装版本 
    如果出现安装错误,可以查看apache包,例如httpd.x86_64

  • yum list|grep httpd 
    然后删除相关依赖包。注意:删除后你的一些配置还会保留起来。

  • yum erase httpd.x86_64

使用service httpd start启动Apache 服务,默认端口为80,直接访问IP或域名看到页面,说明启动成功,失败查看service httpd status中的异常信息。

apache-tomcat-7.0.69.tar.gz,解压即可

  • tar zxvf /home/apache-tomcat-7.0.69.tar.gz#解压至当前文件夹
  • cp /home/apache-tomcat-7.0.69 /usr/local/ #拷贝到/usr/local/文件夹下
  • mv /usr/local/apache-tomcat-7.0.69 tomcat1 #修改文件夹名称为tomcat1

本例是多个tomcat配置一个Apache所以上述操作还要做一遍,创建第二个tomcat,命名为tomcat2.

tomcat-connectors编译并获取mod_jk.so文件,

  • #tar zxvf /home/tomcat-connectors-1.2.42-src.tar.gz
  • cd /home/tomcat-connectors-1.2.40-src/native

这里要注意一下,因为编译时需要Apache bin包下的apxs工具,由于是yum按照,所以不会有bin包,这时就需要下载httpd-devel开发包,

  • rpm -qa|grep httpd #查看httpd安装包列表
  • yum -y install httpd-devel #如果不存在就直接安装
  • which apxs #查询该工具位置,我这里是 /usr/sbin/apxs

接tomcat-connectors编译…

  • [native]# ./configure --with-apxs=/usr/sbin/apxs#=后面的位置就是上面安装apxs位置,注意需要在/home/tomcat-connectors-1.2.40-src/native目录下操作。

  • [native]# make #执行编译

编译成功后,在 /home/tomcat-connectors-1.2.40-src/native/apache-2.0/mod_jk.so 找到 mod_jk.so文件,将其复制到Apache module包下

  • cp /home/tomcat-connectors-1.2.40-src/native/apache-2.0/mod_jk.so /etc/httpd/modules/

使用了全路径,自己可以简写.

配置

创建两个文件,利用 mod_jk.so插件包将Apache与tomcatx做关联。 
进入Apache配置文件

  • cd /etc/httpd/conf #进入配置文件夹
  • vi mod_jk.conf #创建文件, shift+: => q => Enter 关闭
  • vi workers.properties #创建文件,shift+: => q => Enter 关闭

打开mod_jk.conf文件,并写入

#加载 mod_jk.so 文件,放置在最上
LoadModule jk_module /etc/httpd/modules/mod_jk.so
#加载 tomcat 参数配置文件
JkWorkersFile conf/workers.properties
#日志保存文件
JkLogFile /etc/httpd/logs/mod_jk2.log
#日志等级
JkLogLevel info
JkLogStampFormat "[%a %b %d %H:%M:%S %Y]"
JkOptions  +ForwardKeySize +ForwardURICompat -ForwardDirectories
JkRequestLogFormat "%w %V %T"
#######请求拦截, controller负载均衡控制器名称
JkMount /servlet/* controller
JkMount /*.jsp controller
JkMount /*.do controller
############## end #######################
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16

打开workers.properties文件,并写入

#server
worker.list = controller

#========tomcat1========
worker.tomcat1.port=11009  #端口号与tomcat一致
worker.tomcat1.host=localhost
worker.tomcat1.type=ajp13
worker.tomcat1.lbfactor = 1

#========tomcat2========
worker.tomcat2.port=12009  #端口号与tomcat一致
worker.tomcat2.host=localhost
worker.tomcat2.type=ajp13   
worker.tomcat2.lbfactor = 1

#========controller=负载均衡控制器名称=======
worker.controller.type=lb
worker.controller.balanced_workers=tomcat1,tomcat2 #多个tomcat以","隔开
worker.controller.sticky_session=false
worker.controller.sticky_session_force=1
#worker.controller.sticky_session=1
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21

将文件关联创建好后,就需要加入Apache配置文件中,打开httpd.conf,增加包含mod_jk.conf文件。

  • vi /etc/httpd/conf/httpd.conf #打开文件 。
  • Include /etc/httpd/conf/mod_jk.conf #添加该行,建立关联。
  • Listen 80 同时可以修改它的访问接口,默认80。

做好关联后现在,要修改tomcatx的server.xml 配置文件。部分修改为:

...
<!--    
    <Connector port="8081" protocol="org.apache.coyote.http11.Http11NioProtocol"
               connectionTimeout="20000"
               URIEncoding="UTF-8" 
            useBodyEncodingForURI="true" 
            maxThreads="768" 
               minSpareThreads="64" 
            enableLookups="false"  
               redirectPort="8443" />
    -->
<!-- 将该请求端口号该为 上面workers.properties文件中的一致,包括两台-->
<Connector port="11009" protocol="AJP/1.3" redirectPort="8443" />
 ...
<Engine name="Catalina" defaultHost="localhost" jvmRoute="tomcat1">
...
<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"/>
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17

测试

为了看一下这个集群配置是否配置成功,需要创建测试的简单页面,将其放在tomcat能够访问了ROOT中。命名为test.jsp 
测试页面内容为:

<%@ page contentType="text/html; charset=utf-8" %>
    <%@ page import="java.util.*" %>
        <html>
            <head>
                <title>
                    Cluster App Test
                </title>
            </head>
            <body>
                Server Info:
                <% out.println(request.getLocalAddr() + " : " + request.getLocalPort()+
                "<br>");%>
                    <% out.println( "<br> ID " + session.getId()+ "<br>"); // 如果有新的 Session
                    属性设置 String dataName=r equest.getParameter( "dataName"); if (dataName !=n
                    ull && dataName.length()>
                        0) { String dataValue = request.getParameter("dataValue"); session.setAttribute(dataName,
                        dataValue); } out.println("
                        <b>
                            Session 列表
                        </b>
                        <br>
                        "); System.out.println("============================"); Enumeration e
                        = session.getAttributeNames(); while (e.hasMoreElements()) { String name
                        = (String)e.nextElement(); String value = session.getAttribute(name).toString();
                        out.println( name + " = " + value+"
                        <br>
                        "); System.out.println( name + " = " + value); } %>
                        <form action="test2.jsp" method="POST">
                            名称:
                            <input type=text size=20 name="dataName">
                            <br>
                            值:
                            <input type=text size=20 name="dataValue">
                            <br>
                            <input type=submit>
                        </form>
            </body>
        </html>
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
  • 22
  • 23
  • 24
  • 25
  • 26
  • 27
  • 28
  • 29
  • 30
  • 31
  • 32
  • 33
  • 34
  • 35
  • 36
  • 37
  • 38

启动Apache

  • service httpd start
  • service httpd status #查看是否运行正常

启动tomcatx

  • cd /usr/local/tomcat{x}/bin #打开bin目录
  • ./startup.sh #启动
  • tail -f ../logs/catalina.out #查看打印console,ctrl + z 关闭退出

浏览器访问:http://123.xx.xxx.xx/test.jsp 
页面显示:ID 7B8C934D14F3EF669C437E5B1B8123DB.tomcat1 
刷新:ID BBED560EC85BF46ABB639883B9DAF754.tomcat2 
… 
至此就完成了Apache+tomcat负载均衡配置了,还可以通过Apache 的 ApacheBench来简单测试一下并发。

  • ab -n 4000 -c 1000 http://123.xx.xxx.xx/ #4000请求 + 1000并发数 + 请求的地址,自己的服务器。 
    相关的一些数据就可以体现出来了,也可以先开一个tomcat试一下,在配置多个tomcat,进行对比测试。

总结

其实并不难,只是不够细心,所有软件都是需要配置并作关联,抓住这一点,理清思路,问题解决的方法就很多。 
网上资料被翻了个遍,自己以后也要记录一些作为回馈。 
相关参考:

个人博客: http://www.abina.me/articles/2017/01/19/1484820029888.html