varnish学习应用之 安装 配置 监控

 Varnish作为反向代理软件,应用于Web 前端,其良好的Cache性能使得网站承载能力有很大提升
下面记录下最近使用在Varnish学习与应用中的实践体会,本篇主要内容:安装 配置 监控

一、varnish安装
   通常有两种方法:
   1.下载安装文件,本地编译安装
   2.连到官网,自动安装(比较简单)
    https://www.varnish-cache.org/installation/redhat

二、配置文件
   1、配置Varnish 启动运行参数,如指定对应执行脚本,即vcl文件
      Varnish管理端口,默认为6082,可以改为自己定义的端口,如2000
      VARNISH_ADMIN_LISTEN_PORT=2000
      监听端口,默认为8080,一般改为80
      VARNISH_LISTEN_PORT=80
      指定缓存文件存放路径
      VARNISH_STORAGE_FILE=/var/lib/varnish/varnish_storage.bin
      缓存文件varnish_storage.bin在32位操作系统下,最大仅能支持2G,
      如果需要更大缓存文件则需要安装64为Linux操作系统

      
   2、配置varnish为服务形式运行
      3.0以上版本,安装好varnish后自动配置好了,即直接可以使用service varnish start命令执行
      3.0以下版本,需要手动配置一下相应的配置文件
      1)找到对应版本的安装包下varnish.initr文件,如
        C:/.../varnish-3.0.1/redhat/varnish-3.0.1/redhat/varnish.initrc
      2) 更改varnish.initrc中配置项,主要执行参数
      3) 若参数是默认的配置形式etc/sysconfig/varnish,可以省略第2)步
      4) 将varnish.initrc改名为varnish
      5) copy varnish 到 /etc/rc.d/init.d/下
      6) 给varnish指定执行权限chmod 700 /etc/rc.d/init.d/varnish
      7) chkconfig --add varnish
三、查看Varnish运行状态
    ps -aux|grep varnishd
    正常结果如下

   
    也可以通过top |grep varnishd查看
四、查看Varnish日志
    1、使用varnishlog命令查看日志,可以加些参数,具体可通过-h获得参数说明
       如varnishlog -i txurl 命令去查看是哪些URL导致回源的
    2、将日志保存到一文件
       需要用到varnishncsa指令,如
       varnishncsa -w /var/lib/varnish/varnish.log  将varnishlog 保存在一个文件里
       文件格式为文本格式,比较方便查看
五、查看Varnish缓存情况
    1、通过varnishstat 查看当前及自启动以来的请求及缓存命中情况
   

     结果数据的含义:

     第一行显示的是varnish自启动到现在运行了多长时间,如上图显示的是45天0小时11分27秒
     第二行显示的是启动这个命令的时间,这个三数字最终会变为10,100,1000;分别代表10秒,100秒,1000秒
     第三行显示的是命中率,分别对象上面的时间,分别是10秒内的命中率,100秒内的命中率,1000秒内的命中率
     从第四行开始下面的数据就分为4列
     第一列为总数值,第二列为每秒中的数值,第三列自命令(varnishstat)启动以来的平均值,第四列是描述

     其中几个比较重要的是

     Client connections accepted:表示客户端向反向代理服务器成功发送HTTP请求的总数量
     Client requests received:表示到现在为止,浏览器向反向代理服务器发送HTTP请求的累积次数,由于可能会使用长连接,所以这个值一般会大于Client connections accepted
     cache-hit :代表缓存命中次数
     miss-hit :代表未命中次数
     worker threads :代表当前工作线程的数量
     expired objects :代表过期对象的个数
     LRU nuked objects :代表缓存可使用的内存以达上线而不得不移除的对象个数
     LRU moved objects :代表LRU策略被移动的对象个数
     Total header bytes :代表缓存的请求头对象的大小
     Total body bytes:代表缓存的请求体对象大小

     命中率公式:  cache-hit / Client requests received

     2、若每次查看varnish当前缓存情况都要登录Server,有点麻烦
       可以用php(可以用其它语言)编写一段程序,远程查看
       代码可以参考如下,3.0以下的版本可以通过Socket连接到Varnish管理端口,通过stat命令查看,3.0以上没有stat命令,只能通过下面的方法解决       

View Code
<?php 
$outfile=shell_exec("/usr/bin/varnishstat -x ");
$xml=simplexml_load_string($outfile);
echo $xml->getName() . "<br />";
foreach($xml->children() as $child)
  {
      //$tmpName="";
      foreach($child->children() as $subChild)
      {
        if ($subChild->getName() =="name" )
         {
            $tmpName=$subChild;
        }
        else  if ($subChild->getName() =="value" )
        {
            if ($tmpName!="")
            {
               $arys["$tmpName"]=$subChild;
               $tmpName="";
            }
        }
        else
         {
            continue;
        }
      }
  }
  function byteReduce($bytes)
  {
      if ($bytes>1099511627776)
      {
          return round($bytes/1099511627776)."TB";
      }
      else if ($bytes > 1073741824)
      {
          return round($bytes/1073741824)."GB";
      }
      else if ($bytes>1048576)
      {
          return round($bytes/1048576)."MB";
      }
      else if ($bytes>1024)
      {
          return round($bytes/1024)."KB";
      }
      else
      {
          return $bytes."B";
      }
  }
  echo "client_conn: ".$arys["client_conn"] . "<br />";
  echo "client_req: ".$arys["client_req"] . "<br />";
  echo "cache_hit: ".$arys["cache_hit"] . "<br />";
  echo "cache_miss: ".$arys["cache_miss"] . "<br />";
  echo "Cache hit rate: ".round(($arys["cache_hit"]/$arys["client_req"])*100)." % <br/>";
  echo "LRU nuked objects: ".$arys[n_lru_nuked]."<br/>";
  echo " ".byteReduce($arys["s_bodybytes"]+$arys["s_hdrbytes"])." Acc Content (".byteReduce($arys["s_hdrbytes"])." header ".byteReduce($arys["s_bodybytes"])." Body)";
?>

     页面效果如

      

   当然为了查看实时情况,可以在这监控页加个html定时刷新

   若已经部署了专业的监控工具如catic ,则可以通过配置,在catic中查看Varnish 运行状态

  3.0以上版本,需要一个php页面输出结果echo shell_exec("/usr/bin/varnishstat -x ");然后catic中配置下即可

注: 这是偶首篇blog  :)

 @ken-k-huang

posted @ 2013-03-28 15:53  kcen  阅读(1720)  评论(1编辑  收藏  举报