一、Varnish简介
Varnish是一款高性能、开源的反向代理服务器和缓存服务器,其开发者Poul-Henning Kamp是FreeBSD核心的开发人员之一。
Varnish主要运行两个进程:Management进程和Child进程(也叫Cache进程)。
Management
进程主要实现应用新的配置、编译VCL、监控varnish、初始化varnish以及提供一个命令行接口等。Management进程会每隔几秒钟探测
一下Child进程以判断其是否正常运行,如果在指定的时长内未得到Child进程的回应,Management将会重启此Child进程。
二、Varnish工作流程
1)、
varnish从客户端接收请求后,由vcl_recv状态引擎处理,不能识别的请求将会通过参数pipe交给vcl_pipe状态引擎,需要查找缓存的
请求通过lookup参数将会交给vcl_hash状态引擎,无需缓存的数据通过参数pass将会交给 vcl_pass状态引擎;
2)、vcl_hash状态引擎在接收到请求后会从缓存中查找数据,查询结果有两种,一种是hit缓存命中,另一种是miss缓存未命中;
3)、vcl_hit状态引擎将命中的缓存数据通过参数deliver交给vcl_deliver状态引擎,vcl_deliver状态引擎将数据处理后,最终返回给客户端;
4)、vcl_miss状态引擎将未命中的结果参数fetch交给vcl_fetch状态引擎,vcl_fetch状态引擎将会从数据库中查找数据;
5)、vcl_fetch状态引擎将从数据库中查询到的结果,返回给vcl_deliver状态引擎;
6)、vcl_deliver状态引擎将结果返回给master进程,最终返回给客户端;
三、使用Varnish实现网站动静分离
实验环境,三台虚拟机
Linux:CentOS6.6
Varnish:varnish-3.0.4-1.el6.x86_64
Apache:2.2.15
Varnish主机:IP 192.168.20.104
Web服务器1:IP 192.168.20.193,用于作静态文件服务器
Web服务器2:IP 192.168.20.195,用于作动态程序服务器
前提说明:
varnish
的配置文件为vcl后缀,位于/etc/varnish/目录,缓存通常用于提升响应速度,一般而言,可以缓存html静态页面、图片、js脚本、css
样式表,因为动态脚本语言编写的页面需要使用脚本引擎处理,因此没有缓存的必要性;nginx本身就有缓存及反向代理功能,完全可以实现web服务的动静
分离,不过以缓存功能作对比,varnish的缓存显然比nginx更专业,所以要作缓存服务器,可以试试varnish,本次操作将以实验性的目的,使
用varnish实现web服务动静分离;
1、安装Varnish,如果链接失效了可直接到官网下载,需先安装好依赖包 #yum install -y automake autoconf libtool ncurses-devel libxslt groff pcre-devel pkgconfig libedit
# wget http://repo.varnish-cache.org/redhat/varnish-3.0/el6/x86_64/varnish/varnish-3.0.4-1.el6.x86_64.rpm
# wget http://repo.varnish-cache.org/redhat/varnish-3.0/el6/x86_64/varnish/varnish-docs-3.0.4-1.el6.x86_64.rpm
# wget http://repo.varnish-cache.org/redhat/varnish-3.0/el6/x86_64/varnish/varnish-libs-3.0.4-1.el6.x86_64.rpm
# rpm -ivh varnish-3.0.4-1.el6.x86_64.rpm varnish-docs-3.0.4-1.el6.x86_64.rpm varnish-libs-3.0.4-1.el6.x86_64.rpm
2、配置varnish
1)、编辑varnish脚本的配置文件vi /etc/sysconfig/varnish,将varnish监听的端口修改为80;
2)、新建文件/etc/varnish/web.vcl,编辑varnish缓存规则;默认varnish有个default.vcl
#定义后端服务器backend web1 {
.host="192.168.20.193";
.port="80";
}
backend web2 {
.host="192.168.20.195";
.port="80";
}
#只允许本机使用purgers请求方法清除缓存
acl purgers {
"127.0.0.1";
"192.168.20.104";
}
sub vcl_recv {
if(req.request=="PURGE"){
if(!client.ip~purgers) {
error 405 "Mothod not allow";
}
}
#静态资源交给web1服务器
if(req.url ~ "\.(html|htm|shtml|css|js|jpg|png|gif|jpeg)"){
set req.backend=web1;
}
#php页面交给web2服务器,并跳过缓存
if(req.url ~ "\.php") {
set req.backend=web2;
return(pass);
}
return(lookup);
}
#将命中的缓存清除
sub vcl_hit {
if (req.request == "PURGE") {
purge;
error 200 "Purged OK";
}
}
#如果请求清除的资源不在缓存列表中,返回404状态
sub vcl_miss {
if (req.request == "PURGE") {
purge;
error 404 "Not in cache";
}
}
#如果请求清除的资源是一个不可缓存的资源,返回502状态
sub vcl_pass {
if (req.request == "PURGE") {
error 502 "Purged on a passed object.";
}
}
#缓存对象存活时间
sub vcl_fetch {
if(req.url ~ "\.(html|htm|shtml|css|js|jpg|png|gif|jpeg)"){
set beresp.ttl=7200s;
}
}
#将结果返回给客户端并在响应头部添加两字段,显示命中与否,并显示后端响应的web服务器
sub vcl_deliver {
if(obj.hits > 0) {
set resp.http.X-Cache="HIT from" + " " + server.ip;
}else{
set resp.http.X-Cache="MISS";
}
set resp.http.Backend-IP=req.backend;
}
3)、将配置加载至varnish;
3.1)、先启动varnish再连接varnish;
[root@localhost ~]# service varnish start
Starting Varnish Cache: [ OK ]
[root@localhost ~]# varnishadm -S /etc/varnish/secret -T 127.0.0.1:6082
200
-----------------------------
Varnish Cache CLI 1.0
-----------------------------
Linux,2.6.32-504.el6.x86_64,x86_64,-sfile,-smalloc,-hcritbit
varnish-3.0.4 revision 9f83e8f
Type 'help' for command list.
Type 'quit' to close CLI session.
3.2)、加载配置;
varnish> vcl.load web1 web.vcl
200
VCL compiled.
3.3)、使用配置;
varnish> vcl.use web1
200
varnish> vcl.list
200
available 0 boot
active 0 web1
4)、配置两台web服务器,分别安装apache与php;
192.168.20. 193服务器,新建两页面,index.html与index.php,两页面内容分别为
web1 192.168.20.193和web1,方便区分
echo "web1 192.168.20.193" > /var/www/html/index.html
echo "web1" > /var/www/html/index.php
195服务器,新建两页面,index.html与index.php,两页面内容分别为web1 192.168.20.195和web2,方便区分
echo "web2 192.168.20.195" > /var/www/html/index.html
echo "web2" > /var/www/html/index.php
5)、测试结果,打开地址:192.168.20.104;
当我们请求html页面时,无论我们怎么刷新请求,缓存总是命中,并显示HIT,并且后端服务器一直是,web1(192.168.20.193);
当我们请求php页面时,我们不让他缓存,那么缓存也就永远不会命中,显示MISS,并且后端服务器一直是,web2(192.168.20.195);
6)、清除缓存;
整个配置完成,varnish实现了动静分离;
注意:
1、我是使用root进行操作,如果非root帐号注意权限问题
2、varnish会增加三个相应头信息,分别是“X-Varnish”、“Via”和“Age”。这些头信息在Varnish的处理过程中非常有用。X-Varnish头信息的后面会有一个或两个数字,如果是一个数字,就表明varnish在缓存中没有发现这个请求,这个数字的含义是varnish为这个请求所做的标记ID。如果X-Varnish后是两个数字,就表明varnish在缓存中命中了这个请求,第一个数字是请求的标识ID,第二个数字是缓存的标识ID。“Via”头信息表明这个请求将经过一个代理。“Age”头信息标识出这个请求将被缓存多长时间(单位:秒)。首次请求的“Age”为0,后续的重复请求将会使Age值增大。如果后续的请求没有是“Age”增加,那就说明varnish没有缓存这个响应的结果