PHP共享内存的应用shmop系列

简单的说明

可能很少情况会使用PHP来操控共享内存，一方面在内存的控制上，MC已经提供了一套很好的方式，另一方面，自己来操控内存的难度较大，内存的读写与转存，包括后面可能会用到的存储策略，要是没有一定计算机组成原理的基础，想做这些不是一件容易的事情。那为什么还要使用它呢？如果我想进行管道通信，为其它的应用服务准备数据；我想建立自己的数据缓存体系，使用MC有点大炮打苍蝇的感觉。那么shmop会是一个选择，当然，在操作内存前，一定要谨慎。

系统要求

shmop系列函数只是在unix/Linux下可用，可以通过命令：

 

ipcs -m

 

来查看当前的共享内存使用情况。其中，各个部分解释如下：

key ：共享内存的唯一的key值，共享内存通过该key来判断你读取的是哪一块内存。

shmid：当使用key来获取内存时，你获得的是这个id的值。它作为你操作内存块的标识。

owner：创建该共享内存块的用户

perms：该共享内存的读写权限，8禁止，可以是777，与文件的读写权限一致。

bytes：该内存块的大小

nattch：连接该内存块的进程数

status：当前状态，如：dest，即将删除等。

使用示例

具体的使用说明，在PHP手册中有详细介绍，这里不进行赘述。这里将写一些简单的操作例子。

写入

 

<?php
/**
  * SHMOP共享内存操作示例
  * @author monkee
 **/
$key = 0x4337b700;
$size = 4096;
$shmid = @shmop_open($key, 'c', 0644, $size);
if($shmid === FALSE){
    exit('shmop_open error!');
}

$data = '世界，你好！我将写入很多的数据，你能罩得住么？';

$length = shmop_write($shmid, pack('a*',$data), 0);
if($length === FALSE){
    exit('shmop_write error!');
}

@shmop_close($shmid);

exit('succ');
?>

 

 

读取

 

<?php
/**
  * SHMOP共享内存操作示例
  * @author monkee
 **/
$key = 0x4337b700;
$size = 256;
$shmid = @shmop_open($key, 'c', 0644, $size);
if($shmid === FALSE){
    exit('shmop_open error!');
}

$data = unpack('a*', shmop_read($shmid, 0, 256));
if($data === FALSE){
    exit('shmop_read error!');
}
@shmop_close($shmid);

exit($data[1]);
?>

这里使用到了函数：pack() 这个函数用来将内存里的内容转化为二进制内容，具体请查看手册内容。

 

多服务器内存同步

已经在本地做好了这个服务，现在需要在多台服务器上进行内存数据同步。虽然这个时候可以放弃共享内存的方式来处理数据了，然而你被要求需要这么做。于是，同步我想不是问题，做好“主-从”的架构，我同步好的内存及时推送过去就可以了。然而，我是不是需要在从机上做一个监听程序呢？这样的代价有点大，好的一点是，从机上有apache。也就是说可以使用HTTP协议来进行通信了。

同步策略

如何同步？看似无聊的问题，却又产生了疑惑。同步数据呗，但是同步什么数据！一种方式是主机的内存改变后，程序读取所有内存数据然后发送到从机进行同步；如果我只是更改一些简单的操作位的话，那么小的更新却要引起整个内存块的同步，似乎有些浪费。还有一种，是更新变化。将变化进行更新。这种比较复杂，因为你需要定义每一种操作的处理。幸运的是，你需要操作的数据并不多，还有，你要定义的操作也不多：write，delete（read可以不要，因为你很少会从从机上读取数据）。那么好了，我们选择其中一种来做吧。

主机发送

 

<?php

/**
  * 共享内存操作，支持远程内存同步。
  * @author hufeng@
  * @since 2011-08-10
  *
  */
define('PSHMOP_HOST', '192.168.0.1');
define('PSHMOP_SEPE', "\r\n----------CKSJFIOWKJDFOCKJVNBBSDF----------\r\n");
class Pshmop
{
    static private $data = array();
    static public function write($key, $offset, $data, $size = 0){
        $h = array('key' => $key, 'offset' => $offset, 'size' => $size, 'ac' => 'write');
        return self::add($h, $data);
    }

    static public function del($key){
        $h = array('key' => $key, 'ac' => 'delete');
        return self::add($h);
    }

    static private function add($dataheader, $databody=''){
        self::$data[] = serialize($dataheader)."\n".$databody;
    }

    static private function send(){
        $d = & self::$data;
        if(count($d) == 0){
            return ;
        }
        $http_entity_body = join(PSHMOP_SEPE, $d);
        $http_entity_length = strlen($http_entity_body);
        $fp = fsockopen(PSHMOP_HOST, 80, $errno, $error);
        if(!$fp){
            return -1;
        }

        fputs($fp, "PUT /pshmop.php HTTP/1.1\r\n");
        fputs($fp, 'Host: '.PSHMOP_HOST."\r\n");
        fputs($fp, "Content-Type: application/x-www-form-urlencoded\r\n");
        fputs($fp, "Content-Length: {$http_entity_length}\r\n");
        fputs($fp, "Connection: close\r\n\r\n");
        fputs($fp, $http_entity_body . "\r\n\r\n");
        $d = '';
        while(!feof($fp)){
            $d .= fgets($fp, 4096);
        }
        fclose($fp);
        return $d;
    }
}

使用的时候，进行：

 

 

Pshmop::write();
Pshmop::write();
Pshmop::write();
Pshmop::send();

PS:为了支持多个更新一次传递的原则，以上便是举例。

 

从机监听

 

<?php

/**
  * 共享内存远程处理类
  * 对从远端传输到的数据进行处理、内存同步更新
  * @author hufeng@
  * @since 2011-08-11
  **/
define('RSHMOP_SEPE', "\r\n----------CKSJFIOWKJDFOCKJVNBBSDF----------\r\n");
class Rshmop
{
    static public function run($data){
        $items = @explode(RSHMOP_SEPE, $data);
        if($items === NULL){
            return -1;
        }
        $result = array('succ' => 0, 'error' => 0);
        foreach($items as $k => $i){
            self::op($i) === 0 ? $result['succ']++ : $result['error']++;
            unset($items[$k]);
        }
        return $result;
    }
    static public function op($str){
        $p = strpos($str, "\n");
        $header = @unserialize(substr($str, 0, $p));
        if($header === FALSE){
            return 'Data Format Error!';
        }
        $body = substr($str, $p+1);
        $shmid = null;
        if($header['size'] > 0){
            $shmid = @shmop_open($header['key'], 'c', 0644, $header['size']);
        }
        if(!$shmid){
            $cmd = "ipcs -m | grep '{$header['key']}'";
            $em = exec($cmd);
            $em = preg_replace('/ +/', ' ', $em);
            $ems = explode(' ', $em);
            $header['size'] = intval($ems[4]);
            if($header['size'] == 0){
                if($headerreturn ['ac'] == 'delete'){
                    return 0;
                }else{
                    return 'Param `size` required!';
                }
            }
            $shmid = @shmop_open($header['key'], 'c', 0644, $header['size']);
        }
        if($header['ac'] == 'write'){
            shmop_write($shmid, $body, $header['offset']);
        }
        if($header['ac'] == 'delete'){
            shmop_delete($shmid);
        }
        shmop_close($shmid);
        return 0;
    }
}

如果遇到主机有而从机未有的数据块（可能由网络问题造成，也可以有其它解决办法），可以选择delete然后再进行其它操作。

 

缓存使用的策略

觉得使用MC代价有点高，可以自己来控制内存和使用。当然，小部分的数据可以容易使用，但是当数据多的时候，决定哪部分数据进入内存，哪部分数据进入硬盘都是值得商榷的。这也就是为什么要提策略。

常见的策略无非是 FIFO，LUR，LAR等，但并不是说这些策略就是好的。实际情况中，根据具体的业务需求，来组织相应的策略。最常见的，我们是将从数据库查询时间长的、获取数据耗时（从其它机器上获取）、计算耗时的、需要及时使用的放入内存中。

这部分的代码就不写了，希望有所帮助。

 

转载自：http://tubaluer.iteye.com/blog/1349797 作者 tubaluer