使用Varnish加速web

使用Varnish加速web

问题：

通过配置Varnish缓存服务器，实现如下目标

• 使用varnish加速后端web服务
• 代理服务器可以将远程的web服务器页面缓存在本地
• 远程web服务器对客户端是透明的
• 利用缓存机制提高网站的响应速度
• 使用varnishadm命令管理缓存页面
• 使用varnishstat命令查看varni状态

方案：

通过源码编译安装varnish缓存服务器

• 编译安装varnish软件

修改配置文件，缓存代理员web服务器，实现web加速功能

使用三台虚拟机，其中一台作为web服务器，一台作为varnish代理服务器，另一台作为测试用的Linux客户机

对于web服务器的部署，此实验中仅需要安装nginx或者httpd软件，启动服务，并生成测试首页文件即可，默认httpd网站根路径为/var/www/html/，首页文件为index.htnml默认

作为代理服务器，他和nginx代理最大的区别为，varnish多了一个缓存功能，当有客户端进行访问varnish，varnish第一次访问和nginx一样，进行代理转发，然后返回给客户端，但是这个时候会在varnish服务器上保留一份缓存，如果下次有客户端在次访问这个内容，将直接从varnish代理服务器上直接返回给客户端，而不会再次去转发

如果把这个内容能缓存到全国的服务器，也可以叫CDN（内容分发网络）

步骤：

实现上述例子

步骤一：构建web服务器

1）为了方便实验，我们使用的是httpd

yum -y install httpd

2)启动服务（如果安装了nginx，请关闭，否则端口冲突）

httpd服务默认通过tcp80端口监听客户端请求

systemctl start httpd
ss -nultp |grep 80

3）为web访问建立测试文件

在网站根目录/var/www/html下创建一个名为index.html的首页文件

echo "this is web" > /var/www/html/index.html

步骤二：部署varnish缓存服务器

1）编译安装软件

 yum -y install readline-devel gcc #安装软件依赖包
 yum -y  install pcre-devel
 yum -y  install python3-docutils.noarch
 pip3 install Sphinx
 useradd -s /sbin/nologin varnish  #创建用户
 wget https://varnish-cache.org/_downloads/varnish-6.0.8.tgz
 tar -xf varnish-6.0.8.tgz
 cd varnish-6.0.8/
 ./configure
 make && make install

2)复制启动脚本及配置文件(默认这个软件没有配置文件)

cp varnish-6.0.8/etc/example.vcl /usr/local/etc/default.vcl

3)修改配置文件

vim /usr/local/etc/default.vcl
#约在18行左右
...
backend default {
    .host = "192.168.20.10";
    .port = "80";
}
...

4）启动服务

varnishd -f /usr/local/etc/default.vcl
 ss -nultp | grep 80
#启动服务可能出现的问题，端口冲突。查看是否有软件占用80端口如，httpd或者nginx
#varnishd命令的其他常用选项
#varnishd -f 加配置文件位置，用来启动服务
#varnishd -s malloc,128M  定义varnish使用内存作为缓存
#varnishd -s file,/var/lib/varnish_storage.bin,1G 定义varnish使用文件缓存
#使用内存作为缓存（malloc）优点速度快，缺点重启缓存消失

步骤三：客户端测试

使用客户机进行测试

先访问varnish代理服务器

由图可见访问成功，再次刷新网页之后，从状态我们可以看出使用的为缓存

步骤四：其他操作

1）查看varnish日志

varnishlog   #详细日志
varnishncsa

2）更新缓存数据，在后台web服务器更新页面内容后，用户访问代理服务器看到的还是之前的数据，说明缓存中的数据过期了，需要更新（默认也会自动更新（一般为2分钟），但不是实时更新）

我们快速修改web的内容，然后再次使用浏览器查看

由图可以看出，我们访问目前访问的还是缓存

等两分钟之后，再次刷新

就能看到web正常刷新

手动更新
varnishadm
varnishban req.url ~.*    #清空缓存数据，支持正则表达式