varnish缓存是web应用加速器,同时也作为http反向缓存代理。可以安装varnish在任何http的前端,同时配置它缓存内容。与传统的squid相比,varnish具有性能更高、速度更快、管理更加方便等诸多优点。
Varnish与Squid 的对比
相同点: 同是反向代理服务器、开源
Varnish的优势:
1、Varnish的稳定性很高,Squid 服务器发生故障的几率要高于Varnish,因为使用 Squid 要经常重启
2、Varnish访问速度更快,缓存数据都直接从内存读取,而Squid是从硬盘读取,所以Varnish要快于Squid
3、Varnish可以支持更多的并发连接,因为Varnish的 TCP连接释放要比Squid快,因而在高并发连接情况下可以支持更多TCP连接
4、Varnish可以通过管理端口,使用正则表达式批量的清除部分缓存,而Squid是做不到的;Squid属于是单进程使用单核CPU,但Varnish是通过fork形式打开多进程来做处理,所以可以合理的使用所有核来处理相应的请求
Varnish 的缺点:
1、varnish进程一旦Crash或者重启,所有缓存数据都会丢失,在高并发下,给后端服务器造成很大压力
2、在 varnish 使用中如果单个url的请求通过 HA/F5 等负载均衡,则每次请求落在不同的varnish服务器中,造成请求都会被穿透到后端;而且同样的请求在多台服务器上缓存,也会造成varnish的缓存的资源浪费,造成性能下降
Varnish 劣势的解决方案:
缺点1:在访问量很大的情况下推荐使用 varnish 的内存缓存方式启动,而且后面需要 跟多台 squid/nginx 服务器。主要为了防止前面的varnish服 务、服务器被重启的情况下, 大量请求穿透varnish,这样squid/nginx可以就担当第二层CACHE,而且也弥补了varnish缓存在内存中重启都会释放的问题
缺点2:可以在负载均衡上做url哈希,让单个url请求固定请求到一台varnish服务器上
Varnish 中内置子程序
vcl_recv子程序:
开始处理请求,通过return(动作);选择varnish处理模式,默认进入hash缓存模式(即return(hash);),缓存时间为配置项default_ttl(默认为120秒)过期保持时间default_grace(默认为10秒)。该子程序一般用于模式选择,请求对象缓存及信息修改,后端节点修改,终止请求等操作。
vcl_pipe子程序:
pipe模式处理,该模式主要用于直接取后端响应内容返回客户端,可定义响应内容返回客户端。该子程序一般用于需要及时且不作处理的后端信息,取出后端响应内容后直接交付到客户端不进入vcl_deliver子程序处理。
vcl_pass子程序:
pass模式处理,该模式类似hash缓存模式,仅不做缓存处理。
vcl_hit子程序:
hash缓存模式时,存在hash缓存时调用,用于缓存处理,可放弃或修改缓存。
vcl_miss子程序:
hash缓存模式时,不存在hash缓存时调用,用于判断性的选择进入后端取响应内容,可以修改为pass模式。
vcl_hash子程序:
hash缓存模式,生成hash值作为缓存查找键名提取缓存内容,主要用于缓存hash键值处理,可使用hash_data(string) 指定键值组成结构,可在同一个页面通过IP或cookie生成不同的缓存键值。
vcl_purge子程序:
清理模式,当查找到对应的缓存时清除并调用,用于请求方法清除缓存,并报告。
vcl_deliver子程序:
客户端交付子程序,在vcl_backend_response子程序后调用(非pipe模式),或vcl_hit子程序后调用,可用于追加响应头信息、cookie等内容。
vcl_backend_fetch子程序:
发送后端请求之前调用,可用于改变请求地址或其它信息,或放弃请求。
vcl_backend_response子程序:
后端响应后调用,可用于修改缓存时间及缓存相关信息。
vcl_backend_error子程序:
后端处理失败调用,异常页面展示效果处理,可自定义错误响应内容,或修改beresp.status与beresp.http.Location重定向等。
vcl_synth 子程序:
自定义响应内容。可以通过 synthetic()和返回值synth调用,这里可以自定义异常显示内容,也可以修改resp.status与resp.http.Location重定向。
vcl_init 子程序:
加载vcl时最先调用,用于初始化VMODs,该子程序不参与请求处理,仅在vcl加载时调用一次。
vcl_fini 子程序:
卸载当前vcl配置时调用,用于清理VMODs,该子程序不参与请求处理,仅在vcl正常丢弃后调用。
附上一张原理图(摘自网络)
varnish应用案例:
环境
web01(httpd):192.168.154.137
web02(httpd):192.168.154.138
varnish:192.168.154.139
步骤
web01&web02
yum -y install httpd
firewall-cmd --add-port=80/tcp --permanent
firewall-cmd --reload
setenforce 0
安装varnish
下载地址:
我使用的是varnish-4.0.3.tar.gz这个包
tar zxf varnish-4.0.3.tar.gz
cd varnish-4.0.3/
./configure && make && make install
/usr/local/var/varnish/default.vcl文件的配置如下