啓用MEMCACHE_COMPRESSED壓縮,“擴容”MemCached

版權聲明:可以任意轉載,轉載時請務必以超鏈接形式標明文章原始出處和作者信息及本版權聲明。
http://www.chedong.com/blog/archives/001431.html

嘗試:

啓用了PHPmemcache_set()函數中的 MEMCACHE_COMPRESSED壓縮選項,而memcache_get()可以在後續讀取過程中自動對壓縮的緩存對象進行解壓縮。

效果:

測試了一下,對于博客大巴目前的應用來說,啓用壓縮後,相同的容量(2G)存儲的對象數量增加了約一倍,緩存命中率從50%左右,提高到了60%左右。進一步提高命中率硬件投入還是必須的,又增加了2倍的內存後終于做到了緩存命中率提高到90%;

前提0: 內存緩存有用,且命中率值得提升;

從60%提高到90%,還是從90%提高到95%,要看hit後的性能能夠提升是否值得;

前提1:MemCached已經用滿

先用memcached-tool查看一下memcached的容量統計,看memcached是不是已經用滿了。如果充分運行時MemCached的空間尚未用滿,啓用一下壓縮是沒有意義的; 而且:發現沒有用滿的MemCached,最好減少相應MemCached的容量,空余出更多內存給其他服務做緩存;

前提2: 壓縮率

緩存的數據的確有大于幾百字節的,如果都是小于100字節的鍵值對,壓縮可能反而帶來膨脹。由于緩存對象的大小在Memcached中都是按照固定大小分塊存儲的,最小也要88 B。所以對于過小數據帶來的壓縮膨脹並不是太大的問題;

前台應用的CPU損耗:

對數據的額外壓縮CPU損耗遠遠低于緩存命中率提升減少後台數據庫訪問帶來的性能提升,和http的gzip/deflate壓縮類似,壓縮後數據一般爲原數據大小的30%左右,節省了70%的傳輸性能消耗所得會大于文件壓縮帶來的性能損耗;

以下是啓用壓縮後的一個MemCached的數據塊分布:

# Item_Size Max_age 1MB_pages Count Full?

1 104 B 342694 s 60 604918 yes<==原先最小大部分分布在88 B看來還是有些膨脹的

2 136 B 344213 s 39 300690 yes

3 176 B 324647 s 145 863765 yes

4 224 B 347049 s 52 243412 yes

5 280 B 332911 s 47 175968 yes

6 352 B 257080 s 114 339491 yes

7 440 B 330976 s 39 92934 yes

8 552 B 310225 s 51 96849 yes

9 696 B 305251 s 68 102407 yes

10 872 B 298607 s 74 88947 yes

11 1.1 kB 276463 s 70 66919 yes

12 1.3 kB 279819 s 79 60198 yes

13 1.7 kB 293690 s 97 59073 yes

14 2.1 kB 304436 s 116 56492 yes

15 2.6 kB 298020 s 102 39576 yes

16 3.3 kB 324546 s 100 31000 yes

17 4.1 kB 321757 s 97 24056 yes

18 5.2 kB 320132 s 91 18018 yes

19 6.4 kB 332232 s 89 14062 yes

20 8.1 kB 330696 s 81 10287 yes

21 10.1 kB 329582 s 76 7676 yes

22 12.6 kB 337278 s 72 5832 yes

23 15.8 kB 348626 s 66 4224 yes

24 19.7 kB 345881 s 56 2856 yes

25 24.6 kB 345825 s 44 1804 yes

26 30.8 kB 333460 s 31 1023 yes

27 38.5 kB 335782 s 22 572 yes

28 48.1 kB 302109 s 17 357 yes

29 60.2 kB 358674 s 18 306 yes

30 75.2 kB 396573 s 17 221 yes

31 94.0 kB 431605 s 11 110 yes

32 117.5 kB 418652 s 7 56 yes

33 146.9 kB 408422 s 3 17 no

34 183.6 kB 277529 s 2 7 no

35 229.5 kB 139156 s 1 3 no

36 286.9 kB 232221 s 1 1 no

37 358.6 kB 1059 s 3 6 yes

Drupal教程:啓用緩存和Gzip壓縮-設計技巧
  Drupal4.x/5.x時代的性能問題在drupal6得到了非常大的提升.  但是還有有更進的一步的性能優化:對頁面和靜態資源的啓用緩存和Gzip壓縮傳輸.  Gzip現今已經成爲Internet 上使用非常普遍的一種數據壓縮格式,...查看完整版>>Drupal教程:啓用緩存和Gzip壓縮-設計技巧
 
啓用IIS的Gzip壓縮功能
現代的浏覽器IE6和Firefox都支持客戶端Gzip,也就是說,在服務器上的網頁,傳輸之前,先使用Gzip壓縮再傳輸給客戶端,客戶端接收之後由浏覽器解壓顯示,這樣雖然稍微占用了一些服務器和客戶端的CPU,但是換來的是更高...查看完整版>>啓用IIS的Gzip壓縮功能
 
PHP與Perl操作Memcached速度差異比較
由于最近在進行memcached方面的工作在性能測試中使用了php以及perl對memcached進行操作結果發現php與perl對memcached操作的性能差異大約在40~50%之間以下是測試腳本,所作的操作一樣.使用1k的數據重複512000次.,總共...查看完整版>>PHP與Perl操作Memcached速度差異比較
 
教你使用MySQL觸發器自動更新memcache
mysql 5.1支持觸發器以及自定義函數接口(UDF)的特性,如果配合libmemcache以及Memcached Functions for MySQL,就能夠實現memcache的自動更新。簡單記錄一下安裝測試步驟。 安裝步驟 安裝memcached,這個步驟很簡單,...查看完整版>>教你使用MySQL觸發器自動更新memcache
 
Linux操作系統下安裝Memcache的方法介紹
1.分別把memcached和libevent下載回來,放到 /tmp 目錄下:# cd /tmp# wget http://www.danga.com/memcached/dist/memcached-1.2.0.tar.gz# wget http://www.monkey.org/~provos/libevent-1.2.tar.gz2.先安裝libeven...查看完整版>>Linux操作系統下安裝Memcache的方法介紹
 
Memcached深度分析
Memcached是danga.com(運營LiveJournal的技術團隊)開發的一套分布式內存對象緩存系統,用于在動態系統中減少數據庫負載,提升性能。關于這個東西,相信很多人都用過,本文意在通過對memcached的實現及代碼分析,獲...查看完整版>>Memcached深度分析
 
RFC2435 - RTP Payload Format for JPEG-compressed Video
  Network Working Group L. BercRequest for Comments: 2435 Digital Equipment CorporationObsoletes: 2035 W. FennerCategory: Standards Track Xerox PARC R. Frederick Xerox PARC S. McCanne Lawrence Berke...查看完整版>>RFC2435 - RTP Payload Format for JPEG-compressed Video
 
RFC2035 - RTP Payload Format for JPEG-compressed Video
  Network Working Group L. BercRequest for Comments: 2035 Digital Equipment CorporationCategory: Standards Track W. Fenner Xerox PARC R. Frederick Xerox PARC S. McCanne Lawrence Berkeley Laboratory ...查看完整版>>RFC2035 - RTP Payload Format for JPEG-compressed Video
 
RFC1951 - DEFLATE Compressed Data Format Specification version 1.3
  Network Working Group P. DeutschRequest for Comments: 1951 Aladdin EnterprisesCategory: Informational May 1996 DEFLATE Compressed Data Format Specification version 1.3Status of This Memo This memo...查看完整版>>RFC1951 - DEFLATE Compressed Data Format Specification version 1.3
 
 
回到王朝網路移動版首頁