apache反向代理和负载均衡总结 -

jerryllx

浏览: 65047 次
性别:
来自: 珠海

最近访客更多访客>>

wiseboyloves

yjz毕竟是云

博主相关

博客

微博

相册

留言

关于我

文章分类

社区版块

存档分类

apache反向代理和负载均衡总结

apache反向代理和负载均衡总结

apache功能其实很是强大，最近一段时间研究了下apache的反向代理和负载均衡，反向代理网协的外网出口和我的博客出口就是通过apache的反向代理实现的，总结一下，重点说说负载均衡的配置。
首先说先实验环境吧
操作系统：DEBIAN 5.03（Ubuntu也可以同理配置）

一、安装apache加载模块

apt-get install apache2
然后进入到apache的配置目录
cd /etc/apache2
apache的反向代理和负载均衡其实利用的都是反向代理的原理，至于什么叫做反向代理可以点此http://baike.baidu.com/view/1165595.htm

关键需要加载下面三个模块
LoadModule proxy_module modules/mod_proxy.so
LoadModule proxy_balancer_module modules/mod_proxy_balancer.so
LoadModule proxy_http_module modules/mod_proxy_http.so

由于Debian系统下apache所有的模块都是放在/usr/lib/apache2/modules/里面的，通过/etc/apache2 /mods-available里面的*.load加载的，如果要模块的话需要在/etc/apache2/mods-enabled里面用ln建立链接，当然你也可以再/etc/apache2/apache2.conf里面直接把上面三句话写进入，但是不建议这样做。执行代码如下
ln -s /etc/apache2/mods-available/proxy.load /etc/apache2/mods-enabled/proxy.load
ln -s /etc/apache2/mods-available/proxy_http.load /etc/apache2/mods-enabled/proxy_http.load
ln -s /etc/apache2/mods-available/proxy_balancer.load /etc/apache2/mods-enabled/proxy_banancer.load

做好上面几步之后我们重启下apache
/etc/init.d/apache2 restart

二、配置反向代理功能

加载完模块后可以建立一个虚拟主机来作为反向代理
vi /etc/apache2/sites_available/proxy
配置如下
Listen 202.xxx.xxx.xxx:80     (别人访问的IP和端口)
<VirtualHost 202.xxx.xxx.xxx:80> (同上)
ServerAdmin admin@bit.net
ProxyRequests Off             （说明开启的是反向代理）
ProxyMaxForwards 100
ProxyPreserveHost On
ProxyPass / http://10.x.xx.xxx/ （转发到url上的请求）
ProxyPassReverse / http://10.x.xx.xxx/
<Proxy *>                (这段是访问的控制)
Order Deny,Allow
Allow from all
</Proxy>
</VirtualHost>
然后再在/etc/apache2/sites_enabled/里面建立ln链接
ln -s /etc/apache2/sites_available/proxy /etc/apache2/sites_enabled/proxy
重启apache
/etc/init.d/apache2 restart

然后反向代理就开启了
当别人输入http://202.xxx.xxx.xxx时就会通过反向代理转到http://10.x.xx.xxx上，这样简单的反向代理功能就开启了

三、apache负载均衡配置

a、简单的负载均衡

然后接着讲apache的负载均衡模块吧
同理建立一个虚拟主机来作为负载均衡
vi /etc/apache2/sites_available/balancer
配置如下
Listen 202.x.xx.xxx:80 (别人访问的IP和端口)
<VirtualHost 202.x.xx.xxx:80>

ServerAdmin admin@bit.com
     ProxyRequests Off
     Proxypass / balancer://proxy/
     <Proxy balancer://proxy>
         Order Deny,Allow
         Allow from all
         BalancerMember http://10.0.0.1
         BalancerMember http://10.0.0.2
     </Proxy>

</VirtualHost>
从上面的 ProxyRequests Off 这条可以看出，实际上负载均衡器就是一个反向代理，只不过它的代理转发地址不是某台具体的服务器，而是一个 balancer://协议地址
ProxyPass / balancer://proxy/ 协议地址可以随便定义。然后，在<Proxy>段中设置该balancer协议的内容即可。 BalancerMember指令可以添加负载均衡组中的真实服务器地址。

然后再在/etc/apache2/sites_enabled/里面建立ln链接
ln -s /etc/apache2/sites_available/balancer /etc/apache2/sites_enabled/balancer
重启apache
/etc/init.d/apache2 restart
这样apache的负载均衡就配置好了

如果访问http://202.x.xx.xxx的时候会均匀地打开http://10.0.0.1和http://10.0.0.2,比如你两次打开http://202.x.xx.xxx会又一次打开http://10.0.0.1一次打开http://10.0.0.2这样就是两台服务器接受的请求平均了，达到了负载均衡的效果。

b、负载比例分配

当然如果你发现你的两台服务器配置不一样，一台较好，一台较差，那么就要开始配置不同比例的负载均衡了。如果两台服务器你想配置负载分配比为3:1则配置文件如下

Listen 202.x.xx.xxx:80 (别人访问的IP和端口)
<VirtualHost 202.x.xx.xxx:80>

ServerAdmin admin@bit.com
     ProxyRequests Off
     Proxypass / balancer://proxy/
     <Proxy balancer://proxy>
         Order Deny,Allow
         Allow from all
         BalancerMember http://10.0.0.1   loadfactor= 3
         BalancerMember http://10.0.0.2   loadfactor= 1
     </Proxy>

</VirtualHost>

c、负载分配算法

当然你可能想通过不同的算法实现负载均衡，比方说按照请求次数，或者按照流量均衡，这里用到的指令是lbmethod
lbmethod可能的取值有：
lbmethod=byrequests 按照请求次数均衡(默认)
lbmethod=bytraffic 按照流量均衡
lbmethod=bybusyness 按照繁忙程度均衡(总是分配给活跃请求数最少的服务器)

按照流量的均衡配置如下

Listen 202.x.xx.xxx:80 (别人访问的IP和端口)
<VirtualHost 202.x.xx.xxx:80>

ServerAdmin admin@bit.com
     ProxyRequests Off
     Proxypass / balancer://proxy/
     ProxySet lbmethod=bytraffic   （加上这句）
     <Proxy balancer://proxy>
         Order Deny,Allow
         Allow from all
         BalancerMember http://10.0.0.1   loadfactor= 3
         BalancerMember http://10.0.0.2   loadfactor= 1
     </Proxy>

</VirtualHost>
这样你的负载均衡就可以按照流量均衡了

d、热备份
在最后讲一讲热备份吧，热备份的实现很简单，只需添加 status=+H 属性，就可以把某台服务器指定为备份服务器，配置文件如下
Listen 202.x.xx.xxx:80 (别人访问的IP和端口)
<VirtualHost 202.x.xx.xxx:80>

ServerAdmin admin@bit.com
     ProxyRequests Off
     Proxypass / balancer://proxy/
     ProxySet lbmethod=bytraffic   （加上这句）
     <Proxy balancer://proxy>
         Order Deny,Allow
         Allow from all
         BalancerMember http://10.0.0.1
         BalancerMember http://10.0.0.2   status=+H
     </Proxy>

</VirtualHost>
从配置中可以看出请求总是流向http://10.0.0.1，一旦http: //10.0.0.1挂掉， Apache会检测到错误并把请求分流给 http://10.0.0.2。Apache会每隔几分钟检测一下http://10.0.0.1的状况，如果http://10.0.0.1恢复，就继续使用http://10.0.0.1，这样就可以实现热备份了

好了总结完了，最近发现apache的功能确实是很强大，各种模块都有待发掘，一直在听说Nginx的并发比apache要好，有时间再发个两者的比较的文章吧。

---------------

用cronolog分割apache日志

今天在百度知道上面看见有人问apache的日志怎么分割，想起来以前在做服务器维护的时候做过这个事情，就下来发给他了，这次就随便把它记录下来了，要不然过段时间就给忘记了。

apache默认是没有对日志进行分割的要做的话用cronolog.exe工具或者是apache自带的rotatelogs命令来实现
用得比较多的是cronolog.exe所以就使用cronolog.exe的方法

cronolog工具可以在linux下运行也可以在windows主机上面运行的，linux的安装方式很简单的，make install一下就可以搞定了，安装好了设置方式一样的，下面说说在windows主机上面的设置方式。

    * 1.吧cronolog.exe工具拷贝到apache\bin目录下
    * 2.修改httpd.conf配置文件，找到customlog这一行
    * 3.修改成如下格式：
    CustomLog "|/usr/local/sbin/cronolog /usr/local/apache/logs/%Y_%m_%d.access.log" combined
    CustomLog "|/usr/local/sbin/cronolog /opt/apache/logs/access_log.%Y%m%d" combined
      这里是按照每天来生成日志的
      其中，/home/apache/logs 表示你的log存放的路径；/usr/local/sbin/cronolog为cronolog所在的路径，可以通过 which cronolog 的命令来查看；%Y_%m_%d表示按照年月日来分割，这样一个月就会生成一个日志文件，如果要按照每天生成一个日志文件，好像是%Y%m%d
      然后重启一下apache，就会发现apache日志开始按照日期生成，而原来的apache日志文件就不会再记录新的访问数据了。

----------------

Apache负载均衡设置方法: mod_proxy

一般来说，负载均衡就是将客户端的请求分流给后端的各个真实服务器，达到负载均衡的目的。还有一种方式是用两台服务器，一台作为主服务器 (Master)，另一台作为热备份(Hot Standby)，请求全部分给主服务器，在主服务器当机时，立即切换到备份服务器，以提高系统的整体可
第一次看到这个标题时我也很惊讶，Apache居然还能做负载均衡？真是太强大了。经过一番调查后发现的确可以，而且功能一点都不差。这都归功于 mod_proxy 这个模块。不愧是强大的Apache啊。

废话少说，下面就来解释一下负载均衡的设置方法。

一般来说，负载均衡就是将客户端的请求分流给后端的各个真实服务器，达到负载均衡的目的。还有一种方式是用两台服务器，一台作为主服务器 (Master)，另一台作为热备份(Hot Standby)，请求全部分给主服务器，在主服务器当机时，立即切换到备份服务器，以提高系统的整体可靠性。

1. 负载均衡的设置

1).基本配置
Apache可以应对上面这两种需求。先来讨论一下如何做负载均衡。假设一台apache服务器域名为www.a.com, 首先需要启用Apache的几个模块：

Httpd.conf代码
LoadModule proxy_module modules/mod_proxy.so
LoadModule proxy_balancer_module modules/mod_proxy_balancer.so
LoadModule proxy_http_module modules/mod_proxy_http.so
LoadModule proxy_module modules/mod_proxy.so
LoadModule proxy_balancer_module modules/mod_proxy_balancer.so
LoadModule proxy_http_module modules/mod_proxy_http.so

mod_proxy提供代理服务器功能，mod_proxy_balancer提供负载均衡功能， mod_proxy_http让代理服务器能支持HTTP协议。如果把mod_proxy_http换成其他协议模块（如mod_proxy_ftp），或许能支持其他协议的负载均衡，有兴趣的朋友可以自己尝试一下。

然后要添加以下配置：

Httpd.conf代码
ProxyRequests Off
<Proxy balancer://mycluster>
    BalancerMember http://node-a.myserver.com:8080
    BalancerMember http://node-b.myserver.com:8080
</Proxy>
ProxyPass / balancer://mycluster/
# 警告：以下这段配置仅用于调试，绝不要添加到生产环境中！！！
<Location /balancer-manager>
    SetHandler balancer-manager
    order Deny,Allow
    Deny from all
    Allow from localhost
</Location>
ProxyRequests Off
<Proxy balancer://mycluster>
    BalancerMember http://node-a.myserver.com:8080
    BalancerMember http://node-b.myserver.com:8080
</Proxy>
ProxyPass / balancer://mycluster/
# 警告：以下这段配置仅用于调试，绝不要添加到生产环境中！！！
<Location /balancer-manager>
    SetHandler balancer-manager
    order Deny,Allow
    Deny from all
    Allow from localhost
</Location>

注：node-a.myserver.com，node-b.myserver.com是另外两台服务器的域名，不是当前服务器的域名

从上面的 ProxyRequests Off 这条可以看出，实际上负载均衡器就是一个反向代理，只不过它的代理转发地址不是某台具体的服务器，而是一个 balancer:// 协议：

ProxyPass / balancer://mycluster协议地址可以随便定义。然后，在<Proxy>段中设置该balancer协议的内容即可。 BalancerMember指令可以添加负载均衡组中的真实服务器地址。

下面那段<Location /balancer-manager>是用来监视负载均衡的工作情况的，调试时可以加上（生产环境中禁止使用！），然后访问 http://localhost/balancer-manager/ 即可看到负载均衡的工作状况。

OK，改完之后重启服务器，访问你的Apache所在服务器的地址(www.a.com)，即可看到负载均衡的效果了。

出错提示:
访问网页提示Internal Serveral Error,察看error.log文件

Error.log代码
[warn] proxy: No protocol handler was valid for the URL /admin/login_form. If you are using a DSO version of mod_proxy, make sure the proxy submodules are included in the configuration using LoadModule.
[warn] proxy: No protocol handler was valid for the URL /admin/login_form. If you are using a DSO version of mod_proxy, make sure the proxy submodules are included in the configuration using LoadModule.
原因是配置：# ProxyPass / balancer://mycluster 可能少了一个/

2). 负载比例分配
打开 balancer-manager 的界面，可以看到请求是平均分配的。

如果不想平均分配怎么办？给 BalancerMember 加上 loadfactor 参数即可，取值范围为1-100。比如你有三台服务器，负载分配比例为 7:2:1，只需这样设置：

Httpd.conf代码
ProxyRequests Off
<Proxy balancer://mycluster>
    BalancerMember http://node-a.myserver.com:8080 loadfactor= 7
    BalancerMember http://node-b.myserver.com:8080 loadfactor= 2
    BalancerMember http://node-c.myserver.com:8080 loadfactor= 1
</Proxy>
ProxyPass / balancer://mycluster
ProxyRequests Off
<Proxy balancer://mycluster>
    BalancerMember http://node-a.myserver.com:8080 loadfactor=7
    BalancerMember http://node-b.myserver.com:8080 loadfactor=2
    BalancerMember http://node-c.myserver.com:8080 loadfactor=1
</Proxy>
ProxyPass / balancer://mycluster

3).负载分配算法

默认情况下，负载均衡会尽量让各个服务器接受的请求次数满足预设的比例。如果要改变算法，可以使用 lbmethod 属性。如：

Httpd.conf代码
ProxyRequests Off
<Proxy balancer://mycluster>
    BalancerMember http://node-a.myserver.com:8080 loadfactor= 7
    BalancerMember http://node-b.myserver.com:8080 loadfactor= 2
    BalancerMember http://node-c.myserver.com:8080 loadfactor= 1
</Proxy>
ProxyPass / balancer://mycluster
ProxySet lbmethod=bytraffic
ProxyRequests Off
<Proxy balancer://mycluster>
    BalancerMember http://node-a.myserver.com:8080 loadfactor=7
    BalancerMember http://node-b.myserver.com:8080 loadfactor=2
    BalancerMember http://node-c.myserver.com:8080 loadfactor=1
</Proxy>
ProxyPass / balancer://mycluster
ProxySet lbmethod=bytraffic

lbmethod可能的取值有：

lbmethod=byrequests 按照请求次数均衡(默认)
lbmethod=bytraffic 按照流量均衡
lbmethod=bybusyness 按照繁忙程度均衡(总是分配给活跃请求数最少的服务器)

各种算法的原理请参见Apache的文档。

2. 热备份(Hot Standby)
热备份的实现很简单，只需添加 status=+H 属性，就可以把某台服务器指定为备份服务器：

Httpd.conf代码
ProxyRequests Off
<Proxy balancer://mycluster>
    BalancerMember http://node-a.myserver.com:8080
    BalancerMember http://node-b.myserver.com:8080 status=+H
</Proxy>
ProxyPass / balancer://mycluster
ProxyRequests Off
<Proxy balancer://mycluster>
    BalancerMember http://node-a.myserver.com:8080
    BalancerMember http://node-b.myserver.com:8080 status=+H
</Proxy>
ProxyPass / balancer://mycluster