环境:

ubuntu 9.04

apache 2.2.11

tomcat 6.0.20

mod_jk mod_jk/1.2.26

负载均衡 ( Load Balance)

由于目前现有网络的各个核心部分随着业务量的提高,访问量和数据流量的快速增长,其处理能力和计算强度也相应地增大,使得单一的服务 器设备根本无法承担。在 此情况下,如果扔掉现有设备去做大量的硬件升级,这样将造成现有资源的浪费,而且如果再面临下一次业务量的提升时,这又将导致再一次硬件升级的高额成本投 入,甚至性能再卓越的设备也不能满足当前业务量增长的需求。

负载平衡:即把负载压力根据某种算法合理分配到集群中的每一台计算机上,以减轻主服务器的压力,降低对主服务器的硬件和软件要求。

 

目前比较常用的负载均衡技术主要有

  1. 基于DNS 的负载均衡

    通过DNS 服务中的随机名字解析来实现负载均衡,在DNS 服务器中,可以为多个不同的地址配置同一个名字,而最终查询这个名字的客户机将在解析这个名字 时得到其中一个地址。因此,对于同一个名字,不同的客户机会得到不同的地址,他们也就访问不同地址上的Web 服务器,从而达到负载均衡的目的

  2. 反向代理负载均衡 (如apache+JK2+Tomcatapache+proxy httpapache+proxy+ajp)

  使用代理服务器可以将请求转发给内部的Web 服 务器,让代理服务器将请求均匀地转发给多台内部Web 服务器之一 上,从而达到负载均衡的目的。这种代理方 式与普通的代理方式有所不同,标准代理方式是客户使用代理访问多个外部Web 服务器,而这种代理方式是多个客户使用它访问内部Web 服务器,因此也被称为 反向代理模式。

3. 基于NATNetwork Address Translation )的负载均衡技术 (如Linux Virtual Server ,简称LVS

网络地址转换为在内部地址和外部地址之间进行转换,以便具备内部地址的计算机能访问外部网络,而当外部网络中的计算机访问 地址转换网关拥有的某一外部地址 时,地址转换网关能将其转发到一个映射的内部地址上。因此如果地址转换网关能将每个连接均匀转换为不同的内部服务器地址,此后外部网络中的计算机就各自与 自己转换得到的地址上服务器进行通信,从而达到负载分担的目的。

 

 

 

下文主要描述apache+JK2+Tomcat

相比之下 jk2 http_proxy ajp_proxy 更稳定些,配置也更复杂一些

1 安装 apache 2tomcat

2 安装mod_jk

sudo apt-get install libapache2-mod-jk

查看一下在apache2 的启 动模块中是否有jk.load

$sudo ls /etc/apache2/mods-enabled/

3 配置

/etc/libapache2-mod-jk/workers.properties

 

worker.list = controller,tomcat1,tomcat2  #server 列表

#========tomcat1========

worker.tomcat1.port=8009         #ajp13 端口号,在tomcatserver.xml 配置, 默认8009
worker.tomcat1.host=localhost  #tomcat
的主机地址,如不为本机,请填写ip 地址
worker.tomcat1.type=ajp13
worker.tomcat1.lbfactor = 1   #server
的加权比重,值越高,分得的请求越多

#========tomcat2========

worker.tomcat2.port=8109       #ajp13 端口号,在tomcatserver.xml 配置, 默认8009
worker.tomcat2.host=localhost  #tomcat
的主机地址,如不为本机,请填写ip 地址
worker.tomcat2.type=ajp13
worker.tomcat2.lbfactor = 1   #server
的加权比重,值越高,分得的请求越多


#========controller,
负载均衡控制器========
worker.controller.type=lb
worker.controller.balanced_workers=tomcat1,tomcat2   #
指定分担请求的tomcat
worker.controller.sticky_session=1

 

对于业务系统

worker.controller.sticky_session_force=true 很必要

 

如果tomcat 配置不对jvmRoute

worker.controller.sticky_session_force=true

会出现访问不了系统

 

4 配置apache2.conf
/usr/share/doc/libapache2-mod-jk/httpd_example_apache2.conf
里的内容复制到 apache2.conf 的最后

# Sample mod_jk configuration

# for Apache 2

#

# for all commands/options available see the manual

# provided in libapache-mod-jk-doc package.

# The location where mod_jk will find the workers definitions

JkWorkersFile /etc/libapache2-mod-jk/workers.properties

# The location where mod_jk is going to place its log file

JkLogFile /var/log/apache2/mod_jk.log

# The log level:

# - info log will contain standard mod_jk activity (default).

# - warn log will contain non fatal error reports.

# - error log will contain also error reports.

# - debug log will contain all information on mod_jk activity

# - trace log will contain all tracing information on mod_jk activity

JkLogLevel info

# Assign specific URLs to Tomcat. In general the structure of a

# JkMount directive is: JkMount [URL prefix] [Worker name]

# send all requests ending in .jsp to ajp13_worker

JkMount /*.jsp controller

# send all requests ending /servlet to ajp13_worker

JkMount /*/servlet/ controller

# JkUnmount directive acts as an opposite to JkMount and blocks access

# to a particular URL. The purpose is to be able to filter out the

# particular content types from mounted context.

# do not send requests ending with .gif to ajp13_worker

#JkUnMount /servlet/*.gif controller

# JkMount / JkUnMount directives can also be used inside <VirtualHost>

# sections of your httpd.conf file.

5 修改 tomcat 配置文件 server.xml

如果你在不同电脑上安装tomcat,tomcat 的安装数量为一个,可以不必修改tomcat 配置文件

我这里是在同一台电脑上安装两个tomcat ,所以需要更改其中一个的设置

打开tomcat2/conf/server.xml 文 件

tomcat1

<Engine name="Catalina" defaultHost="localhost"> 修改为

<Engine name="Catalina" defaultHost="localhost" debug="0" jvmRoute="tomcat1">

 

tomcat2

<Engine name="Catalina" defaultHost="localhost"> 修改为

<Engine name="Catalina" defaultHost="localhost" debug="0" jvmRoute="tomcat2">

 

端口修改

<Server port="8005" shutdown="SHUTDOWN"> 修改为

<Server port="8105" shutdown="SHUTDOWN">

 

<Connector port="8080" protocol="HTTP/1.1"

connectionTimeout="20000"

redirectPort="8443" URIEncoding="UTF-8" /> 修改为

<Connector port="8180" protocol="HTTP/1.1"

connectionTimeout="20000"

redirectPort="8443" URIEncoding="UTF-8" />

 

 

<Connector port="8009" protocol="AJP/1.3" redirectPort="8443" /> 修改为

 

<Connector port="8109" protocol="AJP/1.3" redirectPort="8443" />

 

 

 

 

 

 

采用 proxy_http 的 配置
#httpd.conf(Apache
的配置文档,如果想了解Apache 相 关配置参数,请看参考文献)
#
载入重要的模块
LoadModule proxy_module modules/mod_proxy.so
LoadModule proxy_ajp_module modules/mod_proxy_ajp.so
LoadModule proxy_balancer_module modules/mod_proxy_balancer.so
LoadModule proxy_connect_module modules/mod_proxy_connect.so
LoadModule proxy_http_module modules/mod_proxy_http.so
LoadModule proxy_ftp_module modules/mod_proxy_ftp.so
#
设置负载均衡分配用的服务器
<Proxy balancer://apusicBalance>
    BalancerMember http://1.2.3.4:6888/ route=tomcat1 loadfactor=50
    BalancerMember http://1.2.3.5:6888/ route=tomcat2 loadfactor=50
</Proxy>
#
设置代理服务器转发方式,stickysession 就 是会话保持,JSESSIONID 就是Apusic 的会话IDnofailover 就是 说服务器没有做集群
ProxyPass / balancer://apusicBalance stickysession=JSESSIONID nofailover=On
ProxyPassReverse / balancer://apusicBalance

 

 

 

采用的是 ajp_proxy 的 配置。
 
其中 apache 的配置如下:

 # 引入ajp 模块

  LoadModule proxy_module modules/mod_proxy.so

  LoadModule proxy_ajp_module modules/mod_proxy_ajp.so

# 用于监控界面

  LoadModule proxy_balancer_module modules/mod_proxy_balancer.so    

 

ProxyPass /test  balancer://mycluster stickysession=JSESSIONID

 

   BalancerMember ajp://localhost:8009/test route=tomcat1 loadfactor=50

   BalancerMember ajp://localhost:9009/test route=tomcat2 loadfactor=50

 

 

需要注意的几个地方

1 Session 黏性 需要tomcatserver.xml 配置

<Engine name="Catalina" defaultHost="localhost"> 修改为

<Engine name="Catalina" defaultHost="localhost" debug="0" jvmRoute="tomcat1">

这样在用户请求中 的sessionId 会是 uuid.tomcat1 70C011A23F79A154D8002FBFBABD4A82.tomcat1 这样就知道你请求上次请求到那个服务器。

2 测试JSP

 

<%@ page contentType="text/html; charset=UTF-8" %>

<%@ page import="java.util.*" %>

<html><head><title>Cluster App Test</title></head>

<body>

<%

System.out.println("SessionID:" + session.getId());

%>

Server Info:

<%

out.println(request.getServerName() + " : " + request.getServerPort()+"<br>");%>

<%

out.println("<br> ID " + session.getId()+"<br>"); // 如果有新的 Session 属性设置

String dataName = request.getParameter("dataName");

if (dataName != null && dataName.length() > 0) {

String dataValue = request.getParameter("dataValue");

session.setAttribute(dataName, dataValue);

}

out.print("<b>Session 列表</b><br>");

Enumeration e = session.getAttributeNames();

while (e.hasMoreElements()) {

String name = (String)e.nextElement();

String value = session.getAttribute(name).toString();

out.println( name + " = " + value+"<br>");

System.out.println( name + " = " + value);

}

%>

<form action="index2.jsp" method="POST">

名称:<input type=text size=20 name="dataName">

<br>

数值:<input type=text size=20 name="dataValue">

<br>

<input type=submit>

</form>

</body>

</html>