apache和tomcat整合--负载均衡

Apache与Tomcat整合实现动静分离与负载均衡的配置实践

参考资料：

http://www.ibm.com/developerworks/cn/opensource/os-lo-apache-tomcat/

通常，将Apache与Tomcat整合主要出于以下几个原因：
1. 提升对静态文件的处理性能，所有静态文件均由前端的Apache响应，其它与JSP相关的请求分发给后端的Tocmat处理；
2. 利用Apache服务器来做负载均衡以及容错，前端的Apache可作为一个负载均衡器，将请求分发给后端的多台Tomcat，当某一台Tomcat宕机时，可以将其暂时移出集群；
3. 无缝的升级应用程序，在对后端的多台Tomcat进行升级部署时，将其暂时移出集群来实现平滑升级。

而关于Apache与Tomcat整合，有3种方式可以实现：
1. mod_jk
mod_jk 是通过 AJP 协议与 Tomcat 服务器进行通讯的，Tomcat 默认的 AJP Connector 的端口是 8009。JK 本身提供了一个监控以及管理的页面jkstatus，通过 jkstatus 可以监控 JK 目前的工作状态以及对到 tomcat 的连接进行设置；

2. http_proxy
这是利用 Apache 自带的 mod_proxy 模块使用代理技术来连接Tomcat。在配置之前请确保是否使用的是 2.2.x 版本的 Apache 服务器。因为 2.2.x版本对这个模块进行了重写，大大的增强了其功能和稳定性。

3. ajp_proxy
ajp_proxy 连接方式其实跟 http_proxy 方式一样，也是由 mod_proxy 所提供的功能，但是通过 AJP 协议与 Tomcat 服务器进行通讯的，这一点又与mod_jk相同。

下面是具体的配置过程：
测试环境介绍：
Cluster：192.168.203.134
Tomcat Server:192.168.203.133
Tomcat Server:192.168.203.135
注：以下所有配置过程均在Cluster上完成。

1. 安装配置Apache
# wget

# tar xjvf httpd-2.2.18.tar.bz2

# cd httpd-2.2.18
# ./configure --prefix=/opt/apache2 --enable-so --enable-dav --enable-dav-fs --enable-maintainer-mode --with-included-apr --enable-rewrite --enable-ssl --enable-proxy --enable-proxy-http

# make
# make install

下面的可以不要

创建apache用户
# useradd -M apache

修改apache配置文件，让它以用户apache身份运行
# vi /opt/apache2/conf/httpd.conf
============================
User apache
Group apache
============================

2. 通过 Apache mod_jk 方式实现与Tomcat整合
# wget
# tar xzvf tomcat-connectors-1.2.35-src.tar.gz
# cd tomcat-connectors-1.2.35-src/native
# ./configure --with-apxs=/opt/apache2/bin/apxs
# make
注：不需要执行make install的过程，仅需在编译后复制mod_jk.so文件

# cp ./apache-2.0/mod_jk.so /opt/apache2/modules/

# cd /opt/apache2/conf/

创建 mod_jk 主配置文件
# vim extra/httpd-jk.conf

01	# Load the jk module

02	LoadModule jk_module modules/mod_jk.so

03

04	# The location of workers.properties

05	JkWorkersFile conf/extra/httpd-jk-workers.properties

06

07	# The location of jk logs

08	JkLogFile logs/httpd-jk.log

09

10	# The location of jk mount file

11	JkMountFile conf/extra/httpd-jk-uriworkermap.properties

12

13	# The jk log level [debug/error/info]

14	JkLogLevel info

15

16	# The log format

17	JkLogStampFormat "[%a %b %d %H:%M:%S %Y]"

18

19	# JkOptions indicate to send SSL KEY SIZE,

20	JkOptions  +ForwardKeySize +ForwardURICompat -ForwardDirectories

21

22	# JkRequestLogFormat set the request format

JkRequestLogFormat "%w %V %T" 用下面的配置文件： LoadModule jk_module modules/mod_jk.so JkWorkersFile conf/extra/httpd-jk-workers.properties JkLogFile logs/httpd-jk.log JkMountFile conf/extra/httpd-jk-uriworkermap.properties JkLogLevel info JkLogStampFormat "[%a %b %d %H:%M:%S %Y]" JkOptions  +ForwardKeySize +ForwardURICompat -ForwardDirectories JkRequestLogFormat "%w %V %T" 保存退出

创建 mod_jk 集群参数配置文件
# vim extra/httpd-jk-workers.properties 

01	# list the workers by name

02

03	worker.list=DLOG4J, status #创建名为DLOG4J与status的worker

04

05	# localhost server 1

06	# ------------------------

07	worker.s1.port=8009 #后端Tomcat服务器的默认AJP端口

08	worker.s1.host=192.168.203.133 #后端Tomcat服务器的IP

09	worker.s1.type=ajp13 #采用AJP协议进行通信

10

11	# localhost server 2

12	# ------------------------

13	worker.s2.port=8009 #后端Tomcat服务器的默认AJP端口

14	worker.s2.host=192.168.203.135 #后端Tomcat服务器的IP

15	worker.s2.type=ajp13 #采用AJP协议进行通信

16	#worker.s2.stopped=1 #是否暂停该服务器的开关

17

18	worker.DLOG4J.type=lb #采用负载均衡的方式

19	worker.retries=3

20	worker.DLOG4J.balanced_workers=s1, s2 #负载均衡中包括server 1与server 2两台Tomcat服务器

21	worker.DLOG4J.sticky_session=1

22

23	worker.status.type=status #在worker status中对集群状态进行监控

用下面的配置文件

worker.list=DLOG4J, status

worker.s1.port=8009

worker.s1.host=192.168.1.124

worker.s1.type=ajp13

 

创建 mod_jk URL参数文件

vim extra/httpd-jk-uriworkermap.properties

01	/*=DLOG4J #所有的请求都交给DLOG4J处理

02	/jkstatus=status #在/jkstatus页面中监控集群状态

03

04	!/*.gif=DLOG4J #过滤gif

05	!/*.jpg=DLOG4J #过滤jpg

06	!/*.png=DLOG4J #过滤png

07	!/*.css=DLOG4J #过滤css

08	!/*.js=DLOG4J #过滤js

09	!/*.htm=DLOG4J #过滤htm

10	!/*.html=DLOG4J #过滤html

 

 

/*=DLOG4J

/jkstatus=status

!/*.gif=DLOG4J
!/*.jpg=DLOG4J 
!/*.png=DLOG4J 
!/*.css=DLOG4J 
!/*.js=DLOG4J 
!/*.htm=DLOG4J 
!/*.html=DLOG4J

修改Apache主配置文件，使其关联mod_jk主配置文件

# vim httpd.conf

1	# The JK connector settings

2	Include conf/extra/httpd-jk.conf

启动Apache
# /opt/apache2/bin/apachectl start

通过统计监听页面，可以看到后端服务器的状态，如下图所示：

通过浏览器访问，可以发现，在多次刷新之后，请求会随机分配到后端的Tomcat服务器上。
而访问，请求会直接分配到前端的Apache上。

2. 通过 Apache mod_proxy 方式实现与Tomcat整合
进入Apache源码包，添加所需的模块
# cd httpd-2.2.18/modules
# /opt/apache2/bin/apxs -c -i -a proxy/mod_proxy.c proxy/proxy_util.c
# /opt/apache2/bin/apxs -c -i -a proxy/mod_proxy_http.c
# /opt/apache2/bin/apxs -c -i -a proxy/mod_proxy_connect.c
# /opt/apache2/bin/apxs -c -i -a proxy/mod_proxy_ajp.c
# /opt/apache2/bin/apxs -c -i -a proxy/mod_proxy_balancer.c
# /opt/apache2/bin/apxs -c -i -a generators/mod_status.c

添加完成后，在httpd.conf中可以看到以下配置：
---
# Example:
# LoadModule foo_module modules/mod_foo.so
LoadModule proxy_module modules/mod_proxy.so
LoadModule proxy_http_module modules/mod_proxy_http.so
LoadModule proxy_connect_module modules/mod_proxy_connect.so
LoadModule proxy_ajp_module modules/mod_proxy_ajp.so
LoadModule proxy_balancer_module modules/mod_proxy_balancer.so
LoadModule status_module modules/mod_status.so
---

# cd /opt/apache2/conf/

创建 mod_proxy 主配置文件
vim extra/httpd-proxy.conf

01	ProxyPassMatch /*.gif$ ! #过滤gif

02	ProxyPassMatch /*.jpg$ ! #过滤jpg

03	ProxyPassMatch /*.png$ ! #过滤png

04	ProxyPassMatch /*.css$ ! #过滤css

05	ProxyPassMatch /*.js$ ! #过滤js

06	ProxyPassMatch /*.htm$ ! #过滤htm

07	ProxyPassMatch /*.html$ ! #过滤html

08	ProxyPass /server-status ! #过滤server-stauts监控页面

09	ProxyPass /balancer-manager ! #过滤balancer-manager监控页面

10

11	ProxyPass / #创建集群cluster

12

13	BalancerMember #设置cluster成员

14	BalancerMember #设置cluster成员

15

16

17	#设置server-stauts监控页面

18	SetHandler server-status

19	Order Deny,Allow

20	Deny from all

21	Allow from all

22

23

24	#设置balancer-manager监控页面

25	SetHandler balancer-manager

26	Order Deny,Allow

27	Deny from all

28	Allow from all

29

修改Apache主配置文件，使其关联mod_proxy主配置文件
vim httpd.conf

1	# The Proxy settings

2	Include conf/extra/httpd-proxy.conf

启动Apache
# /opt/apache2/bin/apachectl start

通过监控页面，可以看到后端服务器的状态，如下图所示：

通过浏览器访问，可以发现，在多次刷新之后，请求会随机分配到后端的Tomcat服务器上。
而访问，请求会直接分配到前端的Apache上。

3. 通过 Apache mod_proxy_ajp 方式实现与Tomcat整合
整个配置过程与mod_proxy完全相同,仅需要在配置文件 conf/extra/httpd-proxy.conf 中将http协议修改为ajp协议即可，如下所示：

1

...

2	ProxyPass /

3

4	BalancerMember

5	BalancerMember

6

7

...

4. 其它
如果出现 "is built-in and can't be loaded" 类似的错误提示，则代表模块以及集成到了Apache当中，此时需要注释掉相关的LoadModule配置；
鉴于Nginx的高效，通过设置rewrite规则实现与Tomcat集成，处理能力其实比Apache更好；
如果仅仅是为了提升Tomcat的静态文件处理能力，则仅需要考虑集成apr模块即可。

,