淺談Squid在圖片存儲(chǔ)架構(gòu)中的應(yīng)用

作者：王國(guó)峰ivy 2012-09-29 13:33:16

將近快一個(gè)月沒(méi)寫(xiě)文章了，太懶散了，今天振作了一下，寫(xiě)了篇關(guān)于Squid的文章，Squid作為分布式代理緩存服務(wù)器真的非常的棒，希望本文對(duì)你有幫助。

版權(quán)聲明：非商業(yè)自由轉(zhuǎn)載，保留原文內(nèi)容完整性，并署名作者王國(guó)峰和原文鏈接

前言

上一篇我表明了自己對(duì)緩存的立場(chǎng)：緩存一切可以緩存的資源。并討論了如何利用IIS自身的緩存功能來(lái)輕松滿足中小規(guī)模的圖片緩存需求。關(guān)于IIS的客戶端緩存和服務(wù)器端緩存的介紹大家可以回顧這篇文章。自從上一篇文章發(fā)表后，有不少朋友向我反饋：用IIS自身的緩存功能負(fù)載有限，建議使用Varnish或Squid。是的，我非常同意，所以我今天就和大家來(lái)探討一下分布式代理緩存服務(wù)器Squid在圖片存儲(chǔ)架構(gòu)中的應(yīng)用，文中的一些觀點(diǎn)，如有錯(cuò)誤，敬請(qǐng)指出，謝謝。

Squid簡(jiǎn)介

Squid是一款高性能分布式代理緩存服務(wù)器，它一般用來(lái)做前置Web Cache，加快用戶訪問(wèn)Web的速度。為了說(shuō)明其運(yùn)行過(guò)程，我將仍舊沿用我前一篇的YD風(fēng)格，再一次請(qǐng)出人見(jiàn)人愛(ài)、花見(jiàn)花開(kāi)、車見(jiàn)爆胎的空空老師，請(qǐng)讀者自覺(jué)送出掌聲：

Squid君是時(shí)下***的空空作品代理人，為了讓所有空空迷能更快捷地欣賞到高質(zhì)量的空空作品，Squid君天天加班加點(diǎn)，整理和保存空空的***作品，并對(duì)其作進(jìn)一步的優(yōu)化處理，比如去碼。

有一天，我無(wú)聊至極，便打電話給Squid君，向他要***的空空寫(xiě)真圖（向Squid發(fā)出下載請(qǐng)求）；

Squid君仔細(xì)辨別了一下我的聲音，發(fā)現(xiàn)是老朋友，于是便答應(yīng)了我的請(qǐng)求（Squid中的ACL訪問(wèn)控制，只接受合法的請(qǐng)求）；

Squid君對(duì)我說(shuō)他手頭剛好有一周前的空空寫(xiě)真，問(wèn)我看過(guò)沒(méi)有，我說(shuō)發(fā)過(guò)來(lái)看看唄，于是他很快發(fā)給了我（Squid緩存命中，下載極快，哦耶！）；

我收到寫(xiě)真圖，發(fā)現(xiàn)是兩天前已經(jīng)看過(guò)了的，于是告訴Squid君要***的，Squid君看了看庫(kù)存，發(fā)現(xiàn)手頭沒(méi)有***的了，于是就說(shuō)讓我等一會(huì)兒，他去問(wèn)問(wèn)其他的代理兄弟有沒(méi)有，我說(shuō)好的，謝謝（Squid支持分布式集群方式，各個(gè)父子節(jié)點(diǎn)、兄弟節(jié)點(diǎn)之間的緩存數(shù)據(jù)可以互相同步）；

結(jié)果空歡喜一場(chǎng)，他回來(lái)和我說(shuō)其他兄弟也沒(méi)有，當(dāng)我非常失落的時(shí)候，他突然說(shuō)空空今天來(lái)杭州，他可以直接向空空要寫(xiě)真，我一開(kāi)心就對(duì)他說(shuō)，快去快去（當(dāng)Squid緩存不命中時(shí)，只能從源服務(wù)器獲取數(shù)據(jù)）；

過(guò)了好久，Squid君回來(lái)了，他說(shuō)見(jiàn)空空的人實(shí)在太多了，排了好久的隊(duì)才拿到她***的寫(xiě)真圖呢，我謝過(guò)之后他就把寫(xiě)真很快地發(fā)給了我。之后他說(shuō)他一定要把這個(gè)寫(xiě)真保存起來(lái)，以便提供給其他空空迷和其他兄弟代理（Squid會(huì)把從源服務(wù)器獲取的數(shù)據(jù)保存到自己的緩存中，如果下一個(gè)用戶提出同樣的下載請(qǐng)求，Squid直接把緩存中的數(shù)據(jù)給用戶，當(dāng)然也可以把數(shù)據(jù)奉送給其他兄弟代理，獨(dú)樂(lè)樂(lè)不如眾樂(lè)樂(lè)）。

#http_port指令告訴squid在哪個(gè)端口偵聽(tīng)HTTP請(qǐng)求。默認(rèn)端口是3128,除下面的形式外,也可以是http_port 192.168.63.50:3128  
http_port 3128  
icp_port 3130  
   
#緩存目錄的設(shè)置,可以設(shè)置多個(gè)緩存目錄,語(yǔ)法為:<cache_dir> <aufs|ufs> <目錄所在> <MBytes大小> <dir1> <dir2>  
cache_dir ufs /var/spool/squid 1000 64 1024  
   
#下面是關(guān)于日志文件的放置目錄與文件名！  
cache_access_log /var/log/squid/access.log  
cache_log /var/log/squid/cache.log  
cache_store_log /var/log/squid/store.log  
pid_filename /var/run/squid.pid  
   
#關(guān)閉認(rèn)證機(jī)制，有些版本的　squid 會(huì)自動(dòng)的加入代理認(rèn)證機(jī)制，而普通情況下是不需要的,故找到包括auth_param的行，給它們加上注釋  
#auth_param basic children 5  
#auth_param basic realm Squid proxy-caching web server  
#auth_param basic credentialsttl 2 hours  
   
#設(shè)置squid用戶及用戶組、管理員賬號(hào)  
cache_effective_user squid  
cache_effective_group squid  
cache_mgr youraccount@your.e.mail  
   
# 與內(nèi)存有關(guān)的配置：因?yàn)槲业南到y(tǒng)內(nèi)存很小，所以只給 8 MB！如果您的物理內(nèi)存很大的情況下，例如 512 MB，可以考慮加大到 64 或 128 MB。  
cache_mem 128 MB  
   
# 與磁盤(pán)容量有關(guān)的配置(注：下列的 90 與 95 是百分比 )，如果您的 cache_dir 所在磁盤(pán)很大時(shí)，可以考慮將 4096 改成 32768 KB  
cache_swap_low 90  
cache_swap_high 95  
maximum_object_size 4096 KB  
   
# 與內(nèi)存保存資料有關(guān)的配置  
maximum_object_size_in_memory 8 KB  
   
#定義acl(訪問(wèn)控制列表), 語(yǔ)法為:acl<acl> <acl名稱> <acl類型> <配置的內(nèi)容>  
#黑體為用戶自定義部分  
   
acl All src 0/0  
acl Manager proto cache_object  
acl Localhost src 127.0.0.1/32  
acl Safe_ports port 80 21 443 563 70 210 280 488 591 777 1025-65535  
acl SSL_ports 443 563  
acl CONNECT method CONNECT  
acl MyNetwork src 192.168.0.0/16  
   
#利用前面定義的acl,定義訪問(wèn)控制規(guī)則  
http_access allow Manager Localhost  
http_access deny Manager  
http_access deny !Safe_ports  
http_access deny CONNECT !SSL_ports  
http_access allow MyNetwork  
http_access deny All  
   
#定義與其它代理服務(wù)器的關(guān)系,語(yǔ)法: <cache_peer> <主機(jī)名稱> <類別> <http_port> <icp_port> <其它參數(shù)>  
cache_peer 192.168.60.6 parent 4480 7 no-query default 
   
#設(shè)置與其它代理服務(wù)器的關(guān)系:  
# <cache_peer_access> <上層 Proxy > <allow|deny> <acl名稱>  
#cache_peer_access 192.168.60.6 allow aclxxx  
#cache_peer_access 192.168.60.6 deny !aclxxx  
   
coredump_dir /var/spool/squid