varnish的动静分离

一、Varnish简介

Varnish是一款高性能、开源的反向代理服务器和缓存服务器,其开发者Poul-Henning Kamp是FreeBSD核心的开发人员之一。

Varnish主要运行两个进程:Management进程和Child进程(也叫Cache进程)。

Management进程主要实现应用新的配置、编译VCL、监控varnish、初始化varnish以及提供一个命令行接口等。Management进程会每隔几秒钟探测一下Child进程以判断其是否正常运行,如果在指定的时长内未得到Child进程的回应,Management将会重启此Child进程。

二、Varnish工作流程

1)、varnish从客户端接收请求后,由vcl_recv状态引擎处理,不能识别的请求将会通过参数pipe交给vcl_pipe状态引擎,需要查找缓存的请求通过lookup参数将会交给vcl_hash状态引擎,无需缓存的数据通过参数pass将会交给 vcl_pass状态引擎;

2)、vcl_hash状态引擎在接收到请求后会从缓存中查找数据,查询结果有两种,一种是hit缓存命中,另一种是miss缓存未命中;

3)、vcl_hit状态引擎将命中的缓存数据通过参数deliver交给vcl_deliver状态引擎,vcl_deliver状态引擎将数据处理后,最终返回给客户端;

4)、vcl_miss状态引擎将未命中的结果参数fetch交给vcl_fetch状态引擎,vcl_fetch状态引擎将会从数据库中查找数据;

5)、vcl_fetch状态引擎将从数据库中查询到的结果,返回给vcl_deliver状态引擎;

6)、vcl_deliver状态引擎将结果返回给master进程,最终返回给客户端;

三、使用Varnish实现网站动静分离

Varnish主机:两块网卡,外网IP 192.168.0.90,内网IP 192.168.0.102

Web服务器1:IP 192.168.0.104,用于作静态文件服务器

Web服务器2:IP 192.168.0.105,用于作动态程序服务器

前提说明:

varnish的配置文件为vcl后缀,位于/etc/varnish/目录,缓存通常用于提升响应速度,一般而言,可以缓存html静态页面、图片、js脚本、css样式表,因为动态脚本语言编写的页面需要使用脚本引擎处理,因此没有缓存的必要性;nginx本身就有缓存及反向代理功能,完全可以实现web服务的动静分离,不过以缓存功能作对比,varnish的缓存显然比nginx更专业,所以要作缓存服务器,可以试试varnish,本次操作将以实验性的目的,使用varnish实现web服务动静分离;

1、安装Varnish

# rpm -ivh varnish-3.0.4-1.el6.x86_64.rpm

varnish-docs-3.0.4-1.el6.x86_64.rpm

varnish-libs-3.0.4-1.el6.x86_64.rpm

2、配置varnish

1)、编辑varnish脚本的配置文件/etc/sysconfig/varnish,将varnish监听的端口修改为80;

2)、新建文件/etc/varnish/web.vcl,编辑varnish缓存规则;


1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66

#定义后端服务器

backend web1 {

.host="192.168.0.104";

.port="80";

}

backend web2 {

.host="192.168.0.105";

.port="80";

}

#只允许本机使用purgers请求方法清除缓存

acl purgers {

"127.0.0.1";

"192.168.0.0"/24;

}

sub vcl_recv {

if(req.request=="PURGE"){

if(!client.ip~purgers) {

error 405 "Mothod not allow";

}

}

#静态资源交给web1服务器

if(req.url ~ "\.(html|htm|shtml|css|js|jpg|png|gif|jpeg)"){

set req.backend=web1;

}

#php页面交给web2服务器,并跳过缓存

if(req.url ~ "\.php") {

set req.backend=web2;

return(pass);

}

return(lookup);

}

#将命中的缓存清除

sub vcl_hit {

if (req.request == "PURGE") {

purge;

error 200 "Purged OK";

}

}

#如果请求清除的资源不在缓存列表中,返回404状态

sub vcl_miss {

if (req.request == "PURGE") {

purge;

error 404 "Not in cache";

}

}

#如果请求清除的资源是一个不可缓存的资源,返回502状态

sub vcl_pass {

if (req.request == "PURGE") {

error 502 "Purged on a passed object.";

}

}

#缓存对象存活时间

sub vcl_fetch {

if(req.url ~ "\.(html|htm|shtml|css|js|jpg|png|gif|jpeg)"){

set beresp.ttl=7200s;

}

}

#将结果返回给客户端并在响应头部添加两字段,显示命中与否,并显示后端响应的web服务器

sub vcl_deliver {

if(obj.hits > 0) {

set resp.http.X-Cache="HIT from"+ " "+ server.ip;

}else{

set resp.http.X-Cache="MISS";

}

set resp.http.Backend-IP=req.backend;

}

3)、将配置加载至varnish;

3.1)、连接varnish;

3.2)、加载配置;

3.3)、使用配置;

4)、配置两台web服务器,分别安装nginx与php;

192.168.0.104服务器,新建两页面,index.html与index.php,两页面请求输出结果如下:

192.168.0.105服务器,新建两页面,index.html与index.php,两页面请求输出结果如下:

5)、测试结果,打开地址:192.168.0.90;

当我们请求html页面时,无论我们怎么刷新请求,缓存总是命中,并显示HIT,并且后端服务器一直是,web1(192.168.0.104);

当我们请求php页面时,我们不让他缓存,那么缓存也就永远不会命中,显示MISS,并且后端服务器一直是,web2(192.168.0.105);

配置完成,varnish实现了动静分离;

varnish的动静分离

时间: 2024-08-10 15:08:51

varnish的动静分离的相关文章

基于HAProxy+Varnish实现动静分离、负载均衡的高可用集群

拓扑结构介绍 在实际的生产使用过程中,一个基本的能够应对日均百万PV的网络,一般会具有以下几种结构. 这其中每种结构担负了不同的角色. 代理服务器,负责进行请求调度,实现了负载均衡. KeepAlived配置代理服务器实现了高可用. 缓存服务器,实现了资源的缓存,提高了请求的命中率,加快了访问速度. 动静分离,减轻后端服务器压力,提高资源访问速度. 数据库主从复制,读写分离,降低了数据库的压力 运维监控系统,实时监控系统运行状态. 自动化运维控制系统,批量管理大量服务器. 版本控制系统,在应用的

haproxy+varnish+amp集群实现动静分离

    一.简介 Haproxy一个高性能的负载均衡服务软件,它可基于四层和七层之间进行调度,而且对各个节点具有健康状态检测的功能,当后端服务器故障时,会自动标记为不可用状态,当服务器上线时还会自动将后端主机上线.比起lvs其配置简单,且引入了frontend,backend,listen等功能,frontend可添加acl规则,可根据HTTP请求头做规则匹配,然后把请求定向到相关的backend.       二.配置相关参数详解 haproxy主要分为global.defaults.fron

Varnish基础配置实现动静分离web站点

由于一个web站点的程序的访问具有局部性特征:时间上的局部性:一个数据被访问过之后,可能很快会被再次访问到:空间局部性:一个数据被访问时,其周边的数据也有可能被访问到;varnish可将这部分数据缓存下来.缓存的数据存在被访问较频繁的数据可以称其为热区:缓存同样存在局部性:时效性:如果缓存空间耗尽:则采用LRU,最近最少使用算法:将过期的缓存清理掉 varnish的基本工作原理: Varnish通过类似于HTPP反向代理的方式将可以用来缓存的数据缓存下来直接响应给客户端的缓存数据,如果缓存中没有

varnish的缓存加速,以及动静分离,负载均衡

一个简单的拓扑如上,varnish1 上还同时开了nginx,用来做静态的http,app1和app2 是nginx+fastcgi,这个拓扑主要做的是Discuz!论坛的动静分离,以及app的负载均衡,varnish起到个反向代理和缓存加速的功能. varnish1:192.168.1.151,172.16.0.51 app1:172.16.0.52 app3:172.16.0.54 varnish 简介 varnish的缓存方式: 1.malloc,通过malloc获取内存,简单,速度. 2

LAMP+haproxy+varnish实现网站访问的动静分离及静态资源缓存

实验目标:1.    LAMP节点提供用户动态请求访问,数据库单独有数据库节点提供:2.    LAMP动态网站有两台服务器,提供负载均衡:3.    静态网站服务器节点提供用户的静态资源请求访问:存在两台静态web服务器,其网站静态资源在静态服务器上存放:4.    用户的静态请求访问后缓存在varnish服务器上,实现访问加速5.    前端的haproxy提供反向代理功能,将用户的动态资源请求发送给后端LAMP节点,静态资源请求发往后端静态web服务器:6.    该架构考虑还不健全,如静

Varnish的负载均衡、动静分离

一.Varish的简介 Varnish是一款高性能的开源HTTP加速器,挪威最大的在线报纸 Verdens Gang 使用3台Varnish代替了原来的12台Squid,性能比以前更好. 在当前主流的Web架构中,Cache担任着越来越重要的作用.常见的基于浏览器的C/S架构,Web Cache更是节约服务器资源的关键.而最近几年由FreeBSD创始人之一Kamp开发的varnish更是一个不可多得的Web Cache Server.严格意义上说,Varnish是一个高性能的反向代理软件,只不过

使用varnish实现网站动静分离

一.Varnish简介 Varnish是一款高性能.开源的反向代理服务器和缓存服务器,其开发者Poul-Henning Kamp是FreeBSD核心的开发人员之一. Varnish主要运行两个进程:Management进程和Child进程(也叫Cache进程). Management进程主要实现应用新的配置.编译VCL.监控varnish.初始化varnish以及提供一个命令行接口等.Management进程会每隔几秒钟探测一下Child进程以判断其是否正常运行,如果在指定的时长内未得到Chil

Nginx LB+keepalived+varnish+NAMP架构部署wordpress实现动静分离

Nginxproxy+varnish Nginx负载均衡它可基于四层和七层之间进行调度,而且对后端各个节点具有健康状态检测的功能,当后端服务器故障时,会自动标记为不可用状态,当后端节点上线时再将请求调度至此节点,配合keepalived利用飘移IP,高可用保证调度器的实时在线.为保证热区数据的快速响应配合varnish缓存加速,并实现动静分离. 案例架构拓扑如下: 拓扑环境如下: 前端:Nginx+keepalived高可用 调度服务器:Varnish1.Varnish2 缓存服务器:Varni

haproxy+varnish实现discuz论坛的动静分离以及静态缓存

一.目的: (1) 动静分离discuzx,静态资源通过NFS挂载至动态服务器中: (2) varnish缓存静态资源: 二.拓扑规划 三.步骤:     1.先部署discuz的动静分离 (1)在app动态服务器快速搭建LAMP环境: yum install -y httpd mysql-server php php-mysql (2)创建discuz论坛的mysql用户: MySQL [(none)]> GRANT ALL ON *.* TO 'nihao'@'localhost' IDEN