分布式缓存系统Memcached简介与实践

http://blog.csdn.net/hitman9099/archive/2008/09/04/2878417.aspx

缘起: 在数据驱动的web开发中，经常要重复从数据库中取出相同的数据，这种重复极大的增加了数据库负载。缓存是解决这个问题的好办法。但是ASP.NET中的虽然已经可以实现对页面局部进行缓存，但还是不够灵活。此时Memcached或许是你想要的。

Memcached是什么?
Memcached是由Danga Interactive开发的，高性能的，分布式的内存对象缓存系统，用于在动态应用中减少数据库负载，提升访问速度。

Memcached能缓存什么？
通过在内存里维护一个统一的巨大的hash表，Memcached能够用来存储各种格式的数据，包括图像、视频、文件以及数据库检索的结果等。

Memcached快么？

非常快。Memcached使用了libevent（如果可以的话，在linux下使用epoll）来均衡任何数量的打开链接，使用非阻塞的网络I/O，对内部对象实现引用计数(因此，针对多样的客户端，对象可以处在多样的状态)，使用自己的页块分配器和哈希表，因此虚拟内存不会产生碎片并且虚拟内存分配的时间复杂度可以保证为O(1).。

Danga Interactive为提升Danga Interactive的速度研发了Memcached。目前，LiveJournal.com每天已经在向一百万用户提供多达两千万次的页面访问。而这些，是由一个由web服务器和数据库服务器组成的集群完成的。Memcached几乎完全放弃了任何数据都从数据库读取的方式，同时，它还缩短了用户查看页面的速度、更好的资源分配方式，以及Memcache失效时对数据库的访问速度。

Memcached的特点
Memcached的缓存是一种分布式的，可以让不同主机上的多个用户同时访问，因此解决了共享内存只能单机应用的局限，更不会出现使用数据库做类似事情的时候，磁盘开销和阻塞的发生。

Memcached的使用
一 Memcached服务器端的安装（此处将其作为系统服务安装）
下载文件：memcached 1.2.1 for Win32 binaries (Dec 23, 2006)
    1 解压缩文件到c:\memcached
   2 命令行输入 'c:\memcached\memcached.exe -d install'
    3 命令行输入 'c:\memcached\memcached.exe -d start' ，该命令启动 Memcached ，默认监听端口为 11211
通过 memcached.exe -h 可以查看其帮助

一个简单的测试例子

package com.mapbar.util.cache;
import java.util.Date;
import java.util.ResourceBundle;
import com.danga.MemCached.MemCachedClient;
import com.danga.MemCached.SockIOPool;
/**
 * 使用配置文件方式的memcache组件
 *
 */
public class Cache {
 protected static ResourceBundle rb=ResourceBundle.getBundle("memcached");;
 public static MemCachedClient mcc = new MemCachedClient(); 
 static {
  init();
 }     
 public static void init(){
  synchronized (mcc) {  
   System.out.println("init call");
   String[] servers =rb.getString("cache.servers").split(",");       
         
         String[] strWeights =rb.getString("cache.weights").split(",");  
         Integer[] weights = new Integer[strWeights.length];
         for(int i=0;i<strWeights.length;i++){
          weights[i]=Integer.parseInt(strWeights[i]);
         }
        
         //创建一个实例对象SockIOPool     
         SockIOPool pool = SockIOPool.getInstance();       
        
         // set the servers and the weights    
         //设置Memcached Server    
         pool.setServers( servers );       
         pool.setWeights( weights );       
         pool.setInitConn(Integer.parseInt(rb.getString("cache.initConn")));       
         pool.setMinConn(Integer.parseInt(rb.getString("cache.minConn")));       
         pool.setMaxConn(Integer.parseInt(rb.getString("cache.maxConn")));       
         pool.setMaxIdle(Long.parseLong(rb.getString("cache.maxIdle")));       
        
         // set the sleep for the maint thread       
         // it will wake up every x seconds and       
         // maintain the pool size       
         pool.setMaintSleep( 30 );       
        
//         Tcp的规则就是在发送一个包之前，本地机器会等待远程主机    
//         对上一次发送的包的确认信息到来；这个方法就可以关闭套接字的缓存，    
//         以至这个包准备好了就发；    
         pool.setNagle( false );       
         //连接建立后对超时的控制    
         pool.setSocketTO( 3000 );    
         //连接建立时对超时的控制    
         pool.setSocketConnectTO( 0 );       
        
         // initialize the connection pool       
         //初始化一些值并与MemcachedServer段建立连接    
         pool.initialize();    
         // lets set some compression on for the client       
         // compress anything larger than 64k       
         mcc.setCompressEnable( true );       
         mcc.setCompressThreshold( 64 * 1024 );  
  }
 }
 protected static void bulidCache(){  
  
        //set(key,value,Date) ,Date是一个过期时间，如果想让这个过期时间生效的话，这里传递的new Date(long date) 中参数date，需要是个大于或等于1000的值。    
        //因为java client的实现源码里是这样实现的 expiry.getTime() / 1000 ，也就是说，如果 小于1000的值，除以1000以后都是0，即永不过期    
        mcc.set( "test", "This is a test String" ,new Date(100000));   //十秒后过期    
              
    }       
      
 protected static void output() {       
        //从cache里取值    
        String value = (String) mcc.get( "test" );       
        System.out.println(value);        
    }       
           
 public static void main(String[] args){       
        bulidCache();      
        output();           
    }        
}

其中在classespath下有个memcached.properties文件

内容如下：

##muti servers spilt by ,

#这里是你的memcached启动的地址
cache.servers=192.168.0.116:11211
cache.weights=1
#memcached be used
cache.cluster=true

#set some basic pool settings
#5 initial, 5 min, and 250 max conns
#and set the max idle time for a conn
#to 6 hours 6*60*60*1000
cache.initConn=5
cache.minConn=5
cache.maxConn=250
cache.maxIdle=21600000

在Windows下安装Memcached

http://www.oschina.net/docs/article/4

很多phper不知道如何在Windows下搭建Memcache的开发调试环境，最近个人也在研究Memcache，记录下自己安装搭建的过程。
其实我开始研究Memcache的时候并不知道居然还有memcached for Win32这个鸟东西，害得我在CnetOS下折腾1天才搞定，今天突然发现Windows下的Memcache进行开发调试完全没有问题，所以写篇 Memcache的文档分享给大家。

Windows下的Memcache安装：
1. 下载memcache的 windows稳定版，解压放某个盘下面，比如在c:\memcached
2. 在终端（也即cmd命令界面）下输入 ‘c:\memcached\memcached.exe -d install’ 安装
3. 再输入： ‘c:\memcached\memcached.exe -d start’ 启动。NOTE: 以后memcached将作为windows的一个服务每次开机时自动启动。这样服务器端已经安装完毕了。
4.下载php_memcache.dll，请自己查找对应的php版本的文件
5. 在C:\winnt\php.ini 加入一行 ‘extension=php_memcache.dll’
6.重新启动Apache，然后查看一下phpinfo，如果有memcache，那么就说明安装成功！

memcached的基本设置：

-p 监听的端口
-l 连接的IP地址, 默认是本机
-d start 启动memcached服务
-d restart 重起memcached服务
-d stop|shutdown 关闭正在运行的memcached服务
-d install 安装memcached服务
-d uninstall 卸载memcached服务
-u 以的身份运行 (仅在以root运行的时候有效)
-m 最大内存使用，单位MB。默认64MB
-M 内存耗尽时返回错误，而不是删除项
-c 最大同时连接数，默认是1024
-f 块大小增长因子，默认是1.25
-n 最小分配空间，key+value+flags默认是48
-h 显示帮助

Memcache环境测试：
运行下面的php文件，如果有输出This is a test!，就表示环境搭建成功。开始领略Memcache的魅力把！
< ?php
$mem = new Memcache;
$mem->connect(”127.0.0.1″, 11211);
$mem->set(’key’, ‘This is a test!’, 0, 60);
$val = $mem->get(’key’);
echo $val;
?>

其他参考：

http://blog.csdn.net/smilingleo/archive/2008/12/17/3541424.aspx

http://www.paitoubing.cn/blog/memcached_consistent_hashing

posted @ 2010-01-19 19:39 hellofei 阅读(621) 评论(0) 编辑收藏举报

刷新页面返回顶部

hellofei

分布式缓存系统Memcached简介与实践

公告