Varnish6.3安装及负载均衡测试

Varnish(6.3)
Varnish 简介：
Varnish Cache是​​Web应用程序加速器，也称为缓存HTTP反向代理。您可以将其安装在任何使用HTTP的服务器之前，并将其配置为缓存内容。Varnish Cache确实非常快。根据您的体系结构，通常可以将交付速度提高300到1000倍。

Varnish与Squid的对比 ：

说到Varnish，不能不提Squid，Squid是一个高性能的代理缓存服务器，它和varnish之间有诸多的异同点，这里分析如下：
下面是他们之间的相同点：
（1）都是一个反向代理服务器。
（2）都是开源软件。
下面是它们的不同点，也是Varnish的优点：
（1）Varnish的稳定性很高，两者在完成相同负荷的工作时，Squid服务器发生故障的几率要高于Varnish，因为使用Squid要经常重启。
（2）Varnish访问速度更快，Varnish采用了“Visual Page Cache”技术，所有缓存数据都直接从内存读取，而squid是从硬盘读取，因而Varnish在访问速度方面会更快。
（3）Varnish可以支持更多的并发连接，因为Varnish的TCP连接释放要比Squid快。因而在高并发连接情况下可以支持更多TCP连接。
（4）Varnish可以通过管理端口，使用正则表达式批量的清除部分缓存，而Squid是做不到的。
（5） squid属于是单进程使用单核CPU，但Varnish是通过fork形式打开多进程来做处理，所以是合理的使用所有核来处理相应的请求。 当然，与传统的Squid相比，Varnish也是有缺点的，列举如下： 1） varnish进程一旦Hang、Crash或者重启，缓存数据都会从内存中完全释放，此时所有请求都会发送到后端服务器，在高并发情况下，会给后端服务器造成很大压力。 2） 在varnish使用中如果单个url的请求通过HA/F5（负载均衡）每次请求不同的varnish服务器中，被请求varnish服务器都会被穿透到后端，而且同样的请求会在多台服务器上缓存，也会造成varnish的缓存的资源浪费，也会造成性能下降。

解决方案： 1） 综上所述在访问量很大的情况下推荐使用varnish的内存缓存方式启动，而且后面需要跟多台squid服务器。主要为了防止前面的varnish服务、服务器被重启的情况下，前期肯定会有很多的穿透这样squid可以担当第二层CACHE，而且也弥补了varnish缓存在内存中重启都会释放的问题。 2） 这样的问题可以在负载均衡上做url哈希，让单个url请求固定请求到一台varnish服务器上，可以解决该问题。 注：上面的解决方法还需要全面的测试，没有经过证实

---

Varnish 安装：

---

实验环境：

3台虚拟机，ip分别为：
varnish: 192.168.184.131
web1: 192.168.184.129
web2: 192.168.184.130
3台都做：
关闭防火墙和selinux：
systemctl stop firewalld && systemctl disable firewalld
setenforce 0 && sed -i ‘7 s/enforcing/disabled/’ /etc/selinux/config

在varnish 做：
安装阿里yum源和epel源
[root@varnish varnish-6.3.2]# wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo
[root@varnish varnish-6.3.2]# yum -y install epel-release
官方安装文档：
https://packagecloud.io/varnishcache/varnish60lts/install#manual-rpm

varnish 源码包下载路径：
http://varnish-cache.org/releases/rel6.3.2.html#rel6-3-2

在varnish节点上：
1.安装所依赖的函数库：
[root@varnish varnish-6.3.2]# yum install -y pcre-devel python-docutils libedit-dev* gcc gcc-c++ make
2.将下载好的tar包进行解压
[root@varnish ~]# tar xf varnish-6.3.2.tgz -C /usr/src/
3.编译安装：
[root@varnish ~]# ./configure --prefix=/usr/local/varnish --enable-debugging-symbols --enable-dependency-tracking --enable-developer-warnings && make && make install
4.做软链接，让命令可读：
[root@varnish ~]# ln -s /usr/local/varnish/sbin/* /usr/sbin/
[root@varnish ~]# ln -s /usr/local/varnish/bin/* /usr/local/bin/
5.复制模板，作为配置文件
[root@varnish varnish]# egrep -v “^#|$” share/doc/varnish/example.vcl > ./default.vcl

[root@varnish varnish]# cat default.vcl

启动version：
[root@varnish varnish]# varnishd -f /usr/local/varnish/default.vcl -a 0.0.0.0:80

varnish的重要命令行参数：
程序选项：/etc/varnish/varnish.params文件
-a address[:port][,address[:port][…] # 默认为6081端口
-T address[:port] # 默认为6082端口
-s [name=]type[,options] # 定义缓存存储机制
-u user
-g group
-f config # VCL配置文件
-F # 运行于前台
运行时参数：/etc/varnish/varnish.params文件， DEAMON_OPTS
DAEMON_OPTS="-p thread_pool_min=5 -p thread_pool_max=500 -p thread_pool_timeout=300"
-p param=value # 设定运行参数及其值； 可重复使用多次
-r param[,param…] # 设定指定的参数为只读状态

参考文档：https://blog.csdn.net/weixin_44983653/article/details/102465855

在两个web节点安装WEB服务：
[root@web1 ~]# yum -y install httpd
[root@web2 ~]# yum -y install httpd
[root@web1 ~]# sed -i ‘95s/#//’ /etc/httpd/conf/httpd.conf
[root@web2 ~]# sed -i ‘95s/#//’ /etc/httpd/conf/httpd.conf
[root@web1 ~]# systemctl start httpd && systemctl enable httpd
[root@web2 ~]# systemctl start httpd && systemctl enable httpd

测试是否能代理：

[root@varnish varnish]# varnishlog

varnish的负载均衡：

[root@varnish varnish]# vim default.vcl

[root@varnish varnish]# pkill varnishd
[root@varnish varnish]# varnishd -f /usr/local/varnish/default.vcl -a 0.0.0.0:80
再次刷新浏览器：

健康检测：

测试：
此时：

在web1加两个测试页：
[root@web1 ~]# echo 1111 > /var/www/html/a.html
[root@web1 ~]# echo aaaa > /var/www/html/b.html
在web2加两个测试页：
[root@web2 ~]# echo 2222 > /var/www/html/a.html
[root@web2 ~]# echo bbbb > /var/www/html/b.html

根据轮询算法下一次应该调度到web1上，此时关闭web1的httpd服务
[root@web1 ~]# systemctl stop httpd