面向缓存的站点规划1--mod_proxy

原创 2004年07月12日 22:17:00

一个利用APACHE的mod_proxy对多个站点进行做WEB加速http acceleration方案:

原先一个站点的规划可能是这样的:

*.*.*.1 culture.a.com
*.*.*.2/*.*.*.3/*.*.*.4/*.*.*.5 news.a.com
*.*.*.6 auto.a.com
... ...

而在面向缓存服务器的设计中:所有站点都通过外部DNS指向到同一个IP(或者2台到3台):*.*.*.100/101(举例)

工作原理:
外部请求过来时,根据配置文件设置缓存进行转向解析。这样,服务器请求就可以转发到我们指定的内部地址上。
在处理多虚拟主机转向方面:mod_proxysquid要简单一些:可以把不同服务转向后后台多个IP的不同端口上。

squid只能通过禁用DNS解析,然后根据本地的/etc/hosts文件根据请求的域名进行地址转发,后台多个服务器必须使用相同的端口。
但是就性能上来说,专业级别的squid要比mod proxy要优秀的多。

今天先做出apache mod_proxy的文档。 明天应该会做出squid对多个站点进行web加速的文档

基于Apache mod_proxy的反向代理缓存加速实现:
Apache包含了mod_proxy模块,可以用来实现代理服务器,针对后台服务器的反向加速
注:Apache 2.x中mod_proxy已经被分离成mod_proxy和mod_cache:同时mod_cache有基于文件和基于内存的不同实现


实战测试1:

环境:一台sun ultra 60 for solaris 8 运行了bind 9 ,在上面添加了几个虚拟ip分别对应的地址是:
www.my.net 10.1.1.201
ftp.my.net 10.1.1.201
china.my.net 10.1.1.202
试验计划:先安装apache1.3.31,用来配置前面的cache server,然后再安装一个apache1.3.31,用来配置后面真正的web server。放些静态页面,然后做测试,得出结论。
1. 编译apache(用来做cache)

./configure --prefix=/usr/local/apache-front --enable-shared=max --enable-module=most && make && make install (请注意参考下面再进行操作)


编译时的错误:

1. ld.so.1: ./gen_test_char: fatal: libexpat.so.0: open failed: No such file or directory
解决:
bash-2.03# pkginfo|grep expat
application SMCexpat expat
然后察看/usr/local/lib发觉目录下有libexpat.so.0这个文件因此只要:
export LD_LIBRARY_PATH=/lib:/usr/lib:/usr/local/lib
编译可以完成但是启动apache的时候却报错:
Syntax error on line 206 of /usr/local/apache-front/conf/httpd.conf:
Cannot load /usr/local/apache-front/libexec/mod_env.so into server: ld.so.1: /usr/local/apache-front/bin/httpd: fatal: relocation error: file /usr/local/apache-front/libexec/mod_env.so: symbol ap_palloc: referenced symbol not found
../bin/apachectl start: httpd could not be started
如果从配置文件把mod_env.so注释掉又会在模块env_module上报同样错误,看来不能用DSO模式编译
重新编译安装:

./configure --prefix=/usr/local/apache-front --enable-module=most && make && make install

2. 编译安装web server的apache:

./configure --prefix=/usr/local/apache-back && make && make install

3. 进行相应的配置:

创建/var/www/proxy目录,并且将权限设为nobody:nobody


修改apache-front的httpd.conf
ServerAdmin admin@my.net
ServerName www.my.net

ProxyPass / http://china.my.net:8080/
ProxyPassReverse / http://china.my.net:8080/
# cache dir root
CacheRoot "/var/www/proxy"
# max cache storage
CacheSize 500M
# hour: every 4 hour
CacheGcInterval 4
# max page expire time: hour
CacheMaxExpire 240
# Expire time = (now - last_modified) * CacheLastModifiedFactor
CacheLastModifiedFactor 0.1
# defalt expire tag: hour
CacheDefaultExpire 1
# force complete after precent of content retrived: 60-90%
CacheForceCompletion 80
CustomLog /usr/local/apache-front/logs/access_log combined


修改apache-back的httpd.conf
Listen 10.1.1.202:8080
ServerAdmin root@my.net
ServerName china.my.net


基本配置就这些,如果有其他要求可以根据实际情况调整配置。

测试:
由于不进行压力测试,主要检查log的记录情况是否同原来不用代理情况一致。简单的放了一个小站点的htdocs文件,然后用telnet的方式访问80口,以及在windows客户端用浏览器访问。由于在实验机上做了简单的dns服务器,因此可以指定dns服务器为10.1.1.198,这样有个缺点就是不能访问internet上的网站了,另一种比较方便的方法是修改windows的hosts文件。添加一行10.1.1.202 china.my.net

结论:
除了速度方面没有进行测试以外,有几个很明显的优点就是:配置方便。log记录和原来一样,只是记录在运行mod_proxy的apache上,这样对于公司使用统计pv值的软件来说就没有问题了!

参考文档:

1. http://www.chedong.com/tech/cache.html 车东的文章:基于反向代理的Web缓存加速——可缓存的CMS系统设计(这篇文章的主要参考文档,我主要加了一下实例的操作)

2. http://www.apache.org apache的主页

3. http://www.squid-cache.org squid的主页



 

面向缓存的站点规划2--squid

squid我对它的了解还不够多,下面的测试仅仅是我实战的记录。可以保证按照这样做可以成功,不过squid.conf肯定还有很多地方配置的不完善,还好,这段时间会一直看这方面的文档。 这篇文章是全文的第...
  • marcolu
  • marcolu
  • 2004年07月13日 20:11
  • 1804

AD站台与站点的规划与设计(AD规划与设计连载之四)

站台设计是将实体网域对应到 Active Directory 内建构的逻辑站台的对应作业。Active Directory 内的站台是一个或多个具有良好联机的 TCP/IP 子网的逻辑集合。藉由设定站...
  • xuhuojun
  • xuhuojun
  • 2011年09月11日 19:35
  • 1972

GSM网络的工作频段

一  我国的GSM系统一般采用900M和1800MHZ频段 1)  900MHZ频段: 890-915(上行:MS发,BTS收)                   935-960(下行:B...
  • maochengtao
  • maochengtao
  • 2013年05月30日 10:15
  • 1272

Java IO:面向缓冲区、同步、非阻塞式IO(NIO)

转载请注明出处:jiq•钦's technical Blog 引言JDK1.4中引入了NIO,即New IO,目的在于提高IO速度。特别注意JavaNIO不完全是非阻塞式IO(No-Blocking ...
  • jiq408694711
  • jiq408694711
  • 2015年07月06日 23:16
  • 2013

dreamweaver 正在更新站点缓存 未响应

1.  dreamweaver 打开就会未响应  删除C:/Documents and Settings/Administrator/Application Data/Macromedia下的所有的文...
  • nply2008
  • nply2008
  • 2009年10月23日 15:58
  • 4153

Dreamweaver8加载站点缓存时卡死,解决办法:

Dreamweaver8加载站点缓存时卡死,解决办法: 无论中文版的 dreamweaver 8,还是英文版本的dw8或绿色版本的DW8,都可能出现无法启动的情况,这个bug的出现是因为先前你...
  • zhipi
  • zhipi
  • 2010年11月22日 16:33
  • 3739

如何规划网站的框架结构

规划网站的框架结构如同建筑物一样,网站也必须要有自己的框架结构,内容较少的网站其框架结构简单一些,内容复杂的网站其框架结构也想对复杂一些,要根据网站内容来规划期结构。        互联网上有无...
  • TaoHaoGe
  • TaoHaoGe
  • 2013年08月09日 09:45
  • 1097

GIS习题:制作一个上海地铁(进一步考虑到公交)的最佳点到点路径规划生成算法?

Level1:仅考虑转车次数; Level2:考虑每段不转车的路程时间 Level3:进一步考虑等待时间、列车拥挤程度等随机不可测因素 如何用更简单的模型来建模这个“路径规划”问题呢? ...
  • cteng
  • cteng
  • 2016年01月04日 17:00
  • 854

规划语义 Web 站点

规划语义 Web 站点 规划站点以实现结构化数据 ...
  • yuanchao3333
  • yuanchao3333
  • 2008年04月02日 13:47
  • 307

构建高性能的web站点学习笔记三------动态内容缓存

缓存分为:整页缓存,局部缓存,数据缓存,还有代码解释器缓存,web服务器缓存 缓存和缓冲的区别:二者相似之处都是解决速度不一致,而且都需要一块存储区域,缓冲主要为了减缓压力,比如内存的读写速度远远大...
  • jt521xlg
  • jt521xlg
  • 2012年04月14日 19:35
  • 1440
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:面向缓存的站点规划1--mod_proxy
举报原因:
原因补充:

(最多只允许输入30个字)