Linux中Varnish基础应用

Congpanpan 2016-08-08

http  cache的实现方式有两种: Squid、Varnish;一般被称为缓存服务器

Squid:支持正向和反向代理、是一款重量级的缓存服务器,在高负载的情况下,性能非常的稳定

Varnish:支持反向代理;相比于Squid是非常轻量级的缓存服务器,在高负载情况下,性能较差,没有Squid稳定;一般被称为http加速器;

Varnish的特点:

一、组成部分

Management:作为主控进程;提供命令行接口、管理各种子进程、初始化,加载文件等等

Child/Cache:缓存管理、日志数据统计、接受用户请求、对所有缓存做有效性在验证,清理

VCL:Varnish的配置语言;缓存控制机制,调用C编译器,生成二进制程序,让子进程加载

二、工作模式:

1、请求的资源可缓存:

(1)当客户端请求的资源命中了Varnish缓存且缓存未过期时,将直接响应给客户端;

(2)Varnish作为一台反向代理缓存服务器,当客户端请求的资源未命中Varnish缓存时,Varnish会扮演客户端角色去后端主机请求数据,将请求到的资源先缓存到本地,随后再将请求到的资源发送给客户端。

(3)当客户端请求的资源命中了Varnish缓存,但是Varnish上的缓存已过期时,则Varnish会去后端主机确认请求原始资源是否更新;如果未更新,则后端主机仅响应资源首部给Varnish,随后Varnish再将响应资源发送给客户端;如果请求原始资源更新,则后端主机将会响应新的资源给Varnish,Varnish将响应的资源缓存在本地之后再响应给客户端;如果请求的资源后端主机已删除,则Varnish中的缓存也会被删除,响应给客户端404页面

2、请求的资源不可缓存:

(1)当客户端请求的资源为不可缓存时,Varnish会直接去后端主机取得相应内容直接返回给客户端;而不是先缓存到本地再响应给客户端

衡量一个缓存的有效性:

缓存的命中率:

文档命中率:也称为资源命中率,从文档的个数进行衡量

字节命中率:从内容的大小进行衡量

缓存的生命周期:

缓存项过期:惰性清理

缓存空间用尽:使用LRU算法(最近最少使用算法)

注意:当一个缓存项过期时并不会真正从内存中青旅,只是标记为失效,而不是把它删除;当内存空间用尽时,才会真正的删除缓存项

 

三、缓存模式:

(1)file:缓存再磁盘的文件中,自行管理的关键系统

(2)malloc:内存缓存;使用malloc()库调用,在varnish启动时向内存申请指定大小的空间进行缓存

(3)presistent:存储在磁盘上;

四、缓存新鲜度检测机制

有效性在验证:

如果原始内容发生改变,则仅响应首部(不用到body部分;响应码为304(Not  Modified)

如果原始内容发生了改变,则正常响应给客户端,响应码为200

如果原始内容消失,则响应404,此时缓存中的缓存项(object)也应该被删除

条件式请求首部:

If-Modified_Since:基于原始内容的最近一个修改的时间戳进行验证

If-Ummodified_since:如果缓存发生了改变,响应304

If-Match:基于请求内容的匹配做验证

If-None_match:基于Etag比较进行内容验证

五、缓存控制机制

过期日期:

  HTTP/1.0 Expires:给与的是绝对时长

    例如:Expires:Thu, 04 Jun 2015 23:38:18 GMT

  HTTP/1.1 Cache-Control: max-age给与的是相对时长,从接受到相应报文开始

  例如:Cache-Control:max-age=700

六、VCL相关的状态引擎

vcl_recv:接受请求

vcl_hash:

hit:vcl_hit:命中缓存

miss:vcl_miss:未命中缓存

purge:vcl_purge:清除缓存

pipe:vcl_pipe:管道;直接发送给后端主机

pass、hit_for_pass:vcl_pass  ##跳过,直接请求后端主机


vcl_backend_fetch:读取数据

vcl_backend_response:后端主机响应

vcl_backend_error:后端主机响应错误码

vcl_synth:同步

vcl_deliver:响应给客户端

七、VCL的语法格式

(1)表示注释://、#、/*……*/

(2)定义子例程

(3)不支持循环、支持条件判断

(4)具有内建变量

(5)使用终止语句return,没有返回值

(6)支持操作符:=、==、!=、&&、||

八、VCl内建变量

req.*:只匹配客户端发来的请求

    req.http.*:匹配http请求报文的任何首部

    bereq.*:由varnish向后端主机发出http请求

    beresp.*:由后端主机发来http的响应报文首部

    resp.*:由varnish响应给客户端的http的响应报文

    obj.*:存储在缓存空间中的缓存的对应属性

    常用的变量:

    berep:varnish向后端主机请求资源

    bereq.request:请求方法(向后端主机发送请求报文)

    bereq.url:请求的url

    bereq.proto:请求协议

    bereq.backend:指明要调用的后端主机是那个

    beresp:后端主机向varnish响应资源

    beresp.proto:响应协议

    beresp.status:响应的状态码

    beresp.reason:响应原因

    beresp.backend.name:后端主机名称

    beresp.ttl:后端主机请求中的内容的余下的生存时长     

     

    obj.hits:此对象从缓存中命中的次数

    obj.ttl:对象的ttl值;也被称为缓存时长

       

准备环境:CentOS  7

Varnish服务器IP:172.18.42.200
后端主机1:提供httpd服务IP:172.18.42.201
后端主机2:提供httpd服务IP:172.18.42.202

一、Varnish服务器配置

1、安装varnish

1
2
3
4
5
6
7
8
[root@node0 ~]# yum install varnish
[root@node0 ~]# ll /etc/varnish/
total 20
-rw-r--r-- 1 root root 1155 May 20 17:07 default.vcl  ##配置Varnish缓存策略
-rw-r--r-- 1 root root 1224 May 20 11:10 default.vcl.wtc
-rw------- 1 root root   37 May 20 11:09 secret
-rw-r--r-- 1 root root 1200 Mar 16  2015 varnish.params   ##配置缓存机制
-rw-r--r-- 1 root root 1200 May 20 11:12 varnish.params.bak

2、更改varnish的缓存模式:

1
2
3
[root@node0 varnish]# vim varnish.params   
#VARNISH_STORAGE="file,/var/lib/varnish/varnish_storage.bin,1G"  ##默认的缓存机制
VARNISH_STORAGE="malloc,1G"   ##更改缓存为malloc模式

3、定义后端主机

1
2
3
4
5
[root@node0 varnish]# vim default.vcl  ##
backend default {
    .host = "172.18.42.202";    ##后端主机1
    .port = "80";    ##web80端口
}

二、配置后端主机

1、后端主机1安装httpd、php

1
2
[root@node1 ~]# yum install httpd -y
[root@node1 html]# systemctl start httpd.service

2、后端主机2安装httpd

1
2
[root@node2 ~]# yum install nginx
[root@node2 nginx]# nginx

相关推荐