IT技术博客大学习 共学习 共进步
全部 移动开发 后端 数据库 AI 算法 安全 DevOps 前端 设计 开发者

Memcache分布式部署方案

平凡的世界 2009-10-23 23:59:45 累计浏览 6,818 次
本机暂存

前言
应该是很久之前,我开始研究Memcache,写了一系列的学习心得,比如《Discuz!的Memcache缓存实现》等。后面的好几十条回复也让这篇文章成为了此博客中颇受关注的一员。

同时在百度和Google,关键词Memcache在长达一年多的时间里占据着第二位(第一位是官方),为很多需要了解或者应用Memcache的朋友提供了一些信息,但是我始终觉着还不够,于是本文诞生。

唠唠叨叨说了半天,如果你觉着前面嗦,请直接看最后一大段,那是本文的重点。

基础环境
其实基于PHP扩展的Memcache客户端实际上早已经实现,而且非常稳定。先解释一些名词,Memcache是danga.com的一个开源项目,可以类比于MySQL这样的服务,而PHP扩展的Memcache实际上是连接Memcache的方式。

首先,进行Memcache被安装具体可查看:
Linux下的Memcache安装:http://www.ccvita.com/257.html
Windows下的Memcache安装:http://www.ccvita.com/258.html;
其次,进行PHP扩展的安装,官方地址是http://pecl.php.net/package/memcache
最后,启动Memcache服务,比如这样

/usr/local/bin/memcached -d -p 11213-u root -m 10-c 1024-t 8-P /tmp/memcached.pid
/usr/local/bin/memcached -d -p 11214-u root -m 10-c 1024-t 8-P /tmp/memcached.pid
/usr/local/bin/memcached -d -p 11215-u root -m 10-c 1024-t 8-P /tmp/memcached.pid

启动三个只使用10M内存以方便测试。



分布式部署
PHP的PECL扩展中的memcache实际上在2.0.0的版本中就已经实现多服务器支持,现在都已经2.2.5了。请看如下代码

$memcache =newMemcache;
$memcache->addServer('localhost',11213);
$memcache->addServer('localhost',11214);
$memcache->addServer('localhost',11215);
$memStats = $memcache->getExtendedStats();
print_r($memStats);

通过上例就已经实现Memcache的分布式部署,是不是非常简单。


分布式系统的良性运行
在Memcache的实际使用中,遇到的最严重的问题,就是在增减服务器的时候,会导致大范围的缓存丢失,从而可能会引导数据库的性能瓶颈,为了避免出现这种情况,请先看Consistent hashing算法,中文的介绍可以参考这里,通过存取时选定服务器算法的改变,来实现。

修改PHP的Memcache扩展memcache.c的源代码中的

"memcache.hash_strategy"= standard


"memcache.hash_strategy"= consistent

重新编译,这时候就是使用Consistent hashing算法来寻找服务器存取数据了。


有效测试数据表明,使用Consistent hashing可以极大的改善增删Memcache时缓存大范围丢失的情况。
NonConsistentHash: 92% of lookups changed after adding a target to the existing 10
NonConsistentHash: 90% of lookups changed after removing 1 of 10 targets
ConsistentHash: 6% of lookups changed after adding a target to the existing 10
ConsistentHash: 9% of lookups changed after removing 1 of 10 targets

同分类推荐文章

  1. 等了十年的 Go 链式管道,终于来了:seq 让你像写 Scala 一样写 Go (2026-06-25 18:38:18)
  2. Go 实验特性详解 (2026-06-21 10:05:27)
  3. amd64 微架构级别对 Go 程序性能提升多少? (2026-06-21 09:38:49)

查看更多 后端 文章 →

建议继续学习

  1. Twitter/微博客的学习摘要 (累计阅读 12,259)
  2. 面试题 – 为什么我的朋友圈不见了? (累计阅读 11,952)
  3. Facebook 网站架构 (累计阅读 11,112)
  4. 基于Redis构建系统的经验和教训 (累计阅读 10,522)
  5. Zookeeper研究和应用 (累计阅读 9,481)
  6. 基于SSD的数据库性能优化 (累计阅读 8,843)
  7. 分布式哈希和一致性哈希 (累计阅读 8,813)
  8. Feed架构-我们做错了什么 (累计阅读 8,732)
  9. 面试IT业界顶尖企业所应该知道的10道题(1) (累计阅读 8,525)
  10. 提升磁盘IO性能的几个技巧 (累计阅读 8,510)