使用Varnish代替Squid做网站缓存加速器的详细解决方案

news/2024/5/19 10:01:51/文章来源:https://blog.csdn.net/dux003/article/details/5890632

from http://blog.s135.com/post/313

 

我曾经写过一篇文章──《初步试用Squid的替代产品──Varnish Cache网站加速器》,但当时仅仅是用着玩,没做深入研究。

  今天写的这篇关于Varnish的文章,已经是一篇可以完全替代Squid做网站缓存加速器的详细解决方案了。网上关于Varnish的资料很少,中文资料更是微乎其微,希望本文能够吸引更多的人研究、使用Varnish。

  在我看来,使用Varnish代替Squid的理由有三点:
  1、Varnish采用了“Visual Page Cache”技术,在内存的利用上,Varnish比Squid具有优势,它避免了Squid频繁在内存、磁盘中交换文件,性能要比Squid高。
  2、Varnish的稳定性还不错,我管理的一台图片服务器运行Varnish已经有一个月,没有发生过故障,而进行相同工作的Squid服务器就倒过几次。
  3、通过Varnish管理端口,可以使用正则表达式快速、批量地清除部分缓存,这一点是Squid不能具备的。

  点击在新窗口中浏览此图片



   下面来安装Varnish网站缓存加速器(Linux系统):
  1、创建www用户和组,以及Varnish缓存文件存放目录(/var/vcache):
/usr/sbin/groupadd www -g 48
/usr/sbin/useradd -u 48 -g www www
mkdir -p /var/vcache
chmod +w /var/vcache
chown -R www:www /var/vcache


  2、创建Varnish日志目录(/var/logs/):
mkdir -p /var/logs
chmod +w /var/logs
chown -R www:www /var/logs


  3、编译安装varnish:
wget  http://blog.s135.com/soft/linux/varnish/varnish-1.1.2.tar.gz
tar zxvf varnish-1.1.2.tar.gz
cd varnish-1.1.2
./configure --prefix=/usr/local/varnish
make && make install


  4、创建Varnish配置文件:
vi /usr/local/varnish/vcl.conf

  输入以下内容:
引用
backend myblogserver { 
       set backend.host = "192.168.0.5"; 
       set backend.port = "80"; 
}

acl purge {
       "localhost";
       "127.0.0.1";
       "192.168.1.0"/24;
}

sub vcl_recv {
       if (req.request == "PURGE") {
               if (!client.ip ~ purge) {
                       error 405 "Not allowed.";
               }
               lookup;
       }

       if (req.http.host ~ "^blog.s135.com") {
               set req.backend = myblogserver; 
               if (req.request != "GET" && req.request != "HEAD") {
                       pipe;
               }
               else {
                       lookup;
               }
       }
       else {
               error 404 "Zhang Yan Cache Server"; 
               lookup;
       }
}

sub vcl_hit {
       if (req.request == "PURGE") {
               set obj.ttl = 0s;
               error 200 "Purged.";
       }
}

sub vcl_miss {
       if (req.request == "PURGE") {
               error 404 "Not in cache.";
       }
}

sub vcl_fetch {
       if (req.request == "GET" && req.url ~ "/.(txt|js)$") {
               set obj.ttl = 3600s;
       }
       else {
               set obj.ttl = 30d;
       }
}

  这里,我对这段配置文件解释一下:
  (1)、Varnish通过反向代理请求后端IP为192.168.0.5,端口为80的web服务器;
  (2)、Varnish允许localhost、127.0.0.1、192.168.0.***三个来源IP通过PURGE方法清除缓存;
  (3)、Varnish对域名为blog.s135.com的请求进行处理,非blog.s135.com域名的请求则返回“Zhang Yan Cache Server”;
  (4)、Varnish对HTTP协议中的GET、HEAD请求进行缓存,对POST请求透过,让其直接访问后端Web服务器。之所以这样配置,是因为POST请求一般是发送数据给服务器的,需要服务器接收、处理,所以不缓存;
  (5)、Varnish对以.txt和.js结尾的URL缓存时间设置1小时,对其他的URL缓存时间设置为30天。

  5、启动Varnish
ulimit -SHn 51200
/usr/local/varnish/sbin/varnishd -n /var/vcache -f /usr/local/varnish/vcl.conf -a 0.0.0.0:80 -s file,/var/vcache/varnish_cache.data,1G -g www -u www -w 30000,51200,10 -T 127.0.0.1:3500 -p client_http11=on


  6、启动varnishncsa用来将Varnish访问日志写入日志文件:
/usr/local/varnish/bin/varnishncsa -n /var/vcache -w /var/logs/varnish.log &


  7、配置开机自动启动Varnish
vi /etc/rc.local

  在末尾增加以下内容:
引用
ulimit -SHn 51200
/usr/local/varnish/sbin/varnishd -n /var/vcache -f /usr/local/varnish/vcl.conf -a 0.0.0.0:80 -s file,/var/vcache/varnish_cache.data,1G -g www -u www -w 30000,51200,10 -T 127.0.0.1:3500 -p client_http11=on
/usr/local/varnish/bin/varnishncsa -n /var/vcache -w /var/logs/youvideo.log &


  8、优化Linux内核参数
vi /etc/sysctl.conf

  在末尾增加以下内容:
引用
net.ipv4.tcp_fin_timeout = 30
net.ipv4.tcp_keepalive_time = 300
net.ipv4.tcp_syncookies = 1
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
net.ipv4.ip_local_port_range = 5000    65000



   再看看如何管理Varnish:
  1、查看Varnish服务器连接数与命中率:
/usr/local/varnish/bin/varnishstat

   点击在新窗口中浏览此图片

  2、通过Varnish管理端口进行管理:
  用help看看可以使用哪些Varnish命令:
/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 help

引用
Available commands:
ping [timestamp]
status
start
stop
stats
vcl.load 
vcl.inline 
vcl.use 
vcl.discard 
vcl.list
vcl.show 
param.show [-l] []
param.set 
help [command]
url.purge 
dump.pool


  3、通过Varnish管理端口,使用正则表达式批量清除缓存:
  (1)、例:清除类似 http://blog.s135.com/a/zhangyan.html的URL地址):
/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 url.purge /a/

  (2)、例:清除类似 http://blog.s135.com/tech的URL地址:
/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 url.purge w*$

  (3)、例:清除所有缓存:
/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 url.purge *$


  4、一个清除Squid缓存的PHP函数(清除Varnish缓存同样可以使用该函数,无需作任何修改,十分方便):
view plain print ?
  1. <?php  
  2. function purge($ip$url)  
  3. {  
  4.     $errstr = '';  
  5.     $errno = '';  
  6.     $fp = fsockopen ($ip, 80, $errno$errstr, 2);  
  7.     if (!$fp)  
  8.     {  
  9.          return false;  
  10.     }  
  11.     else  
  12.     {  
  13.         $out = "PURGE $url HTTP/1.1/r/n";  
  14.         $out .= "Host:blog.s135.com/r/n";  
  15.         $out .= "Connection: close/r/n/r/n";  
  16.         fputs ($fp$out);  
  17.         $out = fgets($fp , 4096);  
  18.         fclose ($fp);  
  19.         return true;  
  20.     }  
  21. }  
  22.   
  23. purge("192.168.0.4""/index.php");  
  24. ?>  


  附1:Varnish官方网站: http://www.varnish-cache.org/

  附2:2007年12月10日,我写了一个每天0点运行,按天切割Varnish日志,生成一个压缩文件,同时删除上个月旧日志的脚本(/var/logs/cutlog.sh):
  /var/logs/cutlog.sh文件内容如下:
引用
#!/bin/sh
# This file run at 00:00
date=$(date -d "yesterday" +"%Y-%m-%d")
pkill -9 varnishncsa
mv /var/logs/youvideo.log /var/logs/${date}.log
/usr/local/varnish/bin/varnishncsa -n /var/vcache -w /var/logs/youvideo.log &
mkdir -p /var/logs/youvideo/
gzip -c /var/logs/${date}.log > /var/logs/youvideo/${date}.log.gz
rm -f /var/logs/${date}.log
rm -f /var/logs/youvideo/$(date -d "-1 month" +"%Y-%m*").log.gz

  设置在每天00:00定时执行:
/usr/bin/crontab -e
或者
vi /var/spool/cron/root
输入以下内容:
引用
0 0 * * * /bin/sh /var/logs/cutlog.sh

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.luyixian.cn/news_show_880785.aspx

如若内容造成侵权/违法违规/事实不符,请联系dt猫网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

html h5 页面 字体大小 fontsize 5px 不生效_必途必:如何通过网站页面布局优化提升seo关键词排名?...

大多数做SEO的人不会忽视网站的页面优化。很多人把注意力集中在网站主页的页面优化上。网站页面优化也是网站内部优化的第一步。通过页面内容的布局调整和设计&#xff0c;可以创建一个用户喜欢并有利于搜索引擎抓取和识别的页面&#xff0c;从而提高搜索引擎的排名。让网站获得…

php如何安装织梦cms,“织梦CMS”网站程序详细安装步骤?

我们之前把网站程序上传到了空间&#xff0c;并解压缩&#xff0c;现在我们只要把上传的程序安装成功&#xff0c;网站就搭建完成了&#xff0c;可以正常运营了&#xff0c;怎么安装那?其实每一套程序中都有“程序安装指南文档”按照指南就可以安装成功的&#xff0c;网站安装…

filezilla怎么上传HTML,filezilla如何上传网页网站,filezilla上传网页网站的方法

FileZilla是一个快速免费跨平台的FTP软件&#xff0c;实用多功能和界面直观的FTP客户端。那么FieZilla 怎么上传网页和网站呢?下面格子啦小编就给大家分享下filezilla上传网页网站的方法。 1、打开刚刚装好的FileZilla&#xff0c;点击菜单中的“文件” 2、点击站点管理器 3、…

怎样分析网站日志?

分析网站日志对于网站体验的优化、蜘蛛的友好度有着重要的意义&#xff0c;而网站日志分析应当主要包括以下维度。 一、网站日志的基本分析方向 1、蜘蛛日志 网站日志分析必不可少的环节就是分析蜘蛛日志&#xff0c;其蜘蛛类型应当囊括当前主流的蜘蛛分类、异常蜘蛛类型、蜘蛛…

自己开发网站日志分析工具,需要掌握何种技术?

对于网站运营而言&#xff0c;熟练掌握网站日志的分析是一门必会的技术。那么&#xff0c;如果要做网站日志分析&#xff0c;除了使用在线日志分析工具外&#xff0c;还有别的方法吗&#xff1f; 如果要自己开发网站日志分析工具&#xff0c;需要掌握何种技术呢&#xff1f; 分…

网站日志分析的维度与日志在线分析工具推荐

分析网站日志对于网站体验的优化、蜘蛛的友好度有着重要的意义&#xff0c;而网站日志分析应当主要包括以下维度。 蜘蛛类型 1、蜘蛛日志 网站日志分析必不可少的环节就是分析蜘蛛日志&#xff0c;其蜘蛛类型应当囊括当前主流的蜘蛛分类、异常蜘蛛类型、蜘蛛总数、蜘蛛抓取频次…

记录一个很有意思的事情(关于自己的网站自己不能访问,别人通过公网却可以访问)

问题描述&#xff1a; 首先是这样的&#xff0c;无意之中打开自己的网站www.ishells.cn发现竟然不能访问了,很纳闷怎么回事儿&#xff1f;就打开了云服务器检查了一下nginx&#xff0c;博客应用都在运行着&#xff0c;于是又通过 IP 端口的方式发现网站是可以正常访问的&#…

网站源码出现高危漏洞,请尽快修复,避免严重损失,的解决方法

源码出现这种情况的解决方法&#xff1a; 友价商城里的后台管理界面出现这个的 我按照上面的提示&#xff0c;将执行选框取消勾选后&#xff0c;它又出现这个的&#xff1a; 解决方法是 在宝塔里开启防火墙和网站防护设置即可解决

电脑版支付宝支付对接网站问题彻底解决方法总结

这几天一直在找解决电脑版网站支付宝支付问题&#xff0c;今天特意来好好做个总结&#xff0c; 首先进入支付宝开放平台&#xff1a;https://openhome.alipay.com/developmentAccess/developmentAccess.htm 第一次出现失败的原因&#xff1a;验签出错&#xff0c;这点我后来尝…

电脑网站出现支付宝支付时手机扫码出现系统有点忙....的解决方法总结

这个问题导致的原因是我用的是同一个支付宝账号&#xff0c;也就是收款支付宝和付款支付宝一样的&#xff0c;所以才导致此问题出现了&#xff0c;这是低级错误&#xff0c;解决方法&#xff1a;退出该支付宝账号&#xff0c;重新换另一个支付宝账号&#xff0c;再尝试扫一扫支…

网站中出现点击按钮跳出的还是当前页面的解决方法

这几天遇到这样的问题&#xff1a;点开我网站里的其中一个按钮&#xff0c;跳转的页面一直都是当前页面&#xff0c;此时则需要右键查看源代码里对应的链接是连接到哪个页面了&#xff0c;比如下图中&#xff0c;左边所示的是演示源码正确的链接页面地址&#xff0c;而右侧则是…

如何在腾讯云服务器上安装安全狗提高网站安全解决方法总结

如何在腾讯云服务器上架设安全狗提高网站安全解决方法总结 步骤方法&#xff1a;以下步骤是我自己在学习研究时一步步实操过来的&#xff0c;对于新手很有帮助意义。 1、先登录腾讯云服务器&#xff0c;https://cloud.tencent.com/login?s_urlhttps%3A%2F%2Fconsole.cloud.ten…

如何将一键部署下来的网站源码弄到第二个网站里去的解决方法

按照正常的安装网站的方法之后&#xff0c;还需要做的一步重要工作就是&#xff0c;改数据库&#xff0c;通常是在网站里搜索data相关的文件。如下图 此时&#xff0c;登录网址后&#xff0c;它会出现下图所示情况&#xff1a; 此时&#xff0c;再将站点这两处修改下&#xf…

网站设置微信支付时出现:appid和mch-id不匹配的解决方法

问题描述&#xff1a; 解决方法&#xff1a; 一定要准备一个已认证的服务号&#xff08;我的情况就是如此&#xff09;&#xff0c;然后绑定该服务号&#xff1b; 参考官方文档&#xff1a; https://kf.qq.com/faq/1801116VJfua1801113QVNVz.html

网站微信支付时出现支付二维码不显示的解决方法

问题描述&#xff1a; 解决方法&#xff1a;通过快捷键F12查看源代码&#xff0c;逐级逐级的找到对应的位置源码&#xff0c;然后看到该二维码图片对应的链接&#xff1a;如下图&#xff1a; 然后在链接处右键 选择copy link dress,即可将该链接复制好了&#xff1b;然后直接…

关于网站域名备案流程

域名备案需要看在哪里买的空间服务器&#xff0c;比如我在腾讯云买的空间服务器&#xff0c;那么我就只能在腾讯云官网里备案域名了&#xff1b;

强烈推荐这几个程序员常逛的网站! 多希望你能早点知道!

作为一个每天都泡在电脑面前的程序员来说&#xff0c;选对一些学习的地方、和大家交流的地方就显得尤为重要。 当我们有问题的时候我们想第一时间解决&#xff0c;当我们想学习一门新技术的时候我们可以立马get教程&#xff0c;当我们学习了一门新的技术的时候我们抑制不住自己…

微生物文献调研网站与工具---持续更新(2022.09.16)

全文目录 1. 全文说明2. 文献查询网站2.1 常用期刊查询官网1&#xff09; 高质量的期刊是值得细细品味&#xff0c;期刊官网可以进行长期订阅跟踪&#xff08;排名不分先后&#xff09;2&#xff09;文献库检索网站3&#xff09;科研工作的持续跟进与最新进展4 &#xff09;基于…

基于MetaNetX网站的在线代谢敲除模拟与自动建模

0 前言说明 本系列内容说明&#xff1a; 本系列是针对生物研究中的模型种类进行分析介绍&#xff0c;作为**微生物群落相互建模系列的组成一部分。分阶段的介绍代谢网络模型从入门的环境的搭建&#xff0c;到指导湿实验过程全流程分享。探讨基于生物模型对群落中相互作用方式进…

阿里云服务器建站教程

第一步&#xff1a;阿里云域名购买 需要到阿里云购买域名&#xff1a;域名特惠专场 第二步 &#xff1a;IPC备案 自行下载阿里云app进行IPC备案&#xff0c;因为需要进行人脸验证。 第三步&#xff1a;购买服务器 购买服务器&#xff1a;阿里云登录 - 欢迎登录阿里云&…