面向缓存的站点规划1--mod_proxy

一个利用APACHE的mod_proxy对多个站点进行做WEB加速http acceleration方案：

原先一个站点的规划可能是这样的：

*.*.*.1 culture.a.com
*.*.*.2/*.*.*.3/*.*.*.4/*.*.*.5 news.a.com
*.*.*.6 auto.a.com
... ...

而在面向缓存服务器的设计中：所有站点都通过外部DNS指向到同一个IP（或者2台到3台）：*.*.*.100/101（举例）

工作原理：
外部请求过来时，根据配置文件设置缓存进行转向解析。这样，服务器请求就可以转发到我们指定的内部地址上。
在处理多虚拟主机转向方面：mod_proxy比squid要简单一些：可以把不同服务转向后后台多个IP的不同端口上。

而squid只能通过禁用DNS解析，然后根据本地的/etc/hosts文件根据请求的域名进行地址转发，后台多个服务器必须使用相同的端口。
但是就性能上来说，专业级别的squid要比mod proxy要优秀的多。

今天先做出apache mod_proxy的文档。 明天应该会做出squid对多个站点进行web加速的文档

基于Apache mod_proxy的反向代理缓存加速实现：
Apache包含了mod_proxy模块，可以用来实现代理服务器，针对后台服务器的反向加速
注：Apache 2.x中mod_proxy已经被分离成mod_proxy和mod_cache：同时mod_cache有基于文件和基于内存的不同实现

实战测试1：
环境：一台sun ultra 60 for solaris 8 运行了bind 9 ，在上面添加了几个虚拟ip分别对应的地址是：
www.my.net 10.1.1.201
ftp.my.net 10.1.1.201
china.my.net 10.1.1.202
试验计划：先安装apache1.3.31，用来配置前面的cache server，然后再安装一个apache1.3.31，用来配置后面真正的web server。放些静态页面，然后做测试，得出结论。
1. 编译apache（用来做cache）

./configure --prefix=/usr/local/apache-front --enable-shared=max --enable-module=most && make && make install (请注意参考下面再进行操作）

编译时的错误：

1. ld.so.1: ./gen_test_char: fatal: libexpat.so.0: open failed: No such file or directory
解决：
bash-2.03# pkginfo|grep expat
application SMCexpat expat
然后察看/usr/local/lib发觉目录下有libexpat.so.0这个文件因此只要：
export LD_LIBRARY_PATH=/lib:/usr/lib:/usr/local/lib
编译可以完成但是启动apache的时候却报错：
Syntax error on line 206 of /usr/local/apache-front/conf/httpd.conf:
Cannot load /usr/local/apache-front/libexec/mod_env.so into server: ld.so.1: /usr/local/apache-front/bin/httpd: fatal: relocation error: file /usr/local/apache-front/libexec/mod_env.so: symbol ap_palloc: referenced symbol not found
../bin/apachectl start: httpd could not be started
如果从配置文件把mod_env.so注释掉又会在模块env_module上报同样错误，看来不能用DSO模式编译
重新编译安装：

./configure --prefix=/usr/local/apache-front --enable-module=most && make && make install

2. 编译安装web server的apache：

./configure --prefix=/usr/local/apache-back && make && make install

3. 进行相应的配置：

创建/var/www/proxy目录，并且将权限设为nobody:nobody

修改apache-front的httpd.conf：
ServerAdmin admin@my.net
ServerName www.my.net

ProxyPass / http://china.my.net:8080/
ProxyPassReverse / http://china.my.net:8080/
# cache dir root
CacheRoot "/var/www/proxy"
# max cache storage
CacheSize 500M
# hour: every 4 hour
CacheGcInterval 4
# max page expire time: hour
CacheMaxExpire 240
# Expire time = (now - last_modified) * CacheLastModifiedFactor
CacheLastModifiedFactor 0.1
# defalt expire tag: hour
CacheDefaultExpire 1
# force complete after precent of content retrived: 60-90%
CacheForceCompletion 80
CustomLog /usr/local/apache-front/logs/access_log combined

修改apache-back的httpd.conf
Listen 10.1.1.202:8080
ServerAdmin root@my.net
ServerName china.my.net

基本配置就这些，如果有其他要求可以根据实际情况调整配置。

测试：
由于不进行压力测试，主要检查log的记录情况是否同原来不用代理情况一致。简单的放了一个小站点的htdocs文件，然后用telnet的方式访问80口，以及在windows客户端用浏览器访问。由于在实验机上做了简单的dns服务器，因此可以指定dns服务器为10.1.1.198，这样有个缺点就是不能访问internet上的网站了，另一种比较方便的方法是修改windows的hosts文件。添加一行10.1.1.202 china.my.net

结论：
除了速度方面没有进行测试以外，有几个很明显的优点就是：配置方便。log记录和原来一样，只是记录在运行mod_proxy的apache上，这样对于公司使用统计pv值的软件来说就没有问题了！

参考文档：

1. http://www.chedong.com/tech/cache.html 车东的文章：基于反向代理的Web缓存加速——可缓存的CMS系统设计（这篇文章的主要参考文档，我主要加了一下实例的操作）

2. http://www.apache.org apache的主页

3. http://www.squid-cache.org squid的主页