Posts Tagged ‘Memcached’

Memcached 完全剖析 阅读笔记


17 3月
http://www.kuqin.com/web/20080711/11023.html 待阅 其他相关:http://www.ccvita.com/395.html

zendframework session memcached 应用改进


26 2月
曾经转载过的一篇文章中提到的使用方法,似乎对其中某台memcached服务器down掉后的处理比较欠缺一些,貌似会报出异常导致无法正常运行,可能是原文作者当时memcached还处于一个比较早的阶段,还未有相应的错误处理,经研究后将其修改如下,解决了相应问题:
  1. <?php
  2. require_once ‘Zend/Session.php’;
  3. require_once ‘Zend/Config.php’;
  4.  
  5. class Zend_Session_SaveHandler_Memcached implements Zend_Session_SaveHandler_Interface
  6. {
  7.     const LIFETIME          = ‘lifetime’;
  8.     const OVERRIDE_LIFETIME = ‘overrideLifetime’;
  9.     const MEMCACHED            = ‘memcached’;
  10.     protected $_lifetime = false;
  11.     protected $_overrideLifetime = false;
  12.     protected $_sessionSavePath;
  13.     protected $_sessionName;
  14.     protected $_memcached;
  15.     /**
  16.      * Constructor
  17.      *
  18.      * $config is an instance of Zend_Config or an array of key/value pairs containing configuration options for
  19.      * Zend_Session_SaveHandler_Memcached . These are the configuration options for
  20.      * Zend_Session_SaveHandler_Memcached:
  21.      *
  22.      *
  23.      *      sessionId       =>  The id of the current session
  24.      *      sessionName     => The name of the current session
  25.      *      sessionSavePath => The save path of the current session
  26.      *
  27.      * modified            => (string) Session last modification time column
  28.      *
  29.      * lifetime          => (integer) Session lifetime (optional; default: ini_get('session.gc_maxlifetime'))
  30.      *
  31.      * overrideLifetime => (boolean) Whether or not the lifetime of an existing session should be overridden
  32.      *      (optional; default: false)
  33.      *
  34.      * @param Zend_Config|array $config      User-provided configuration
  35.      * @return void
  36.      * @throws Zend_Session_SaveHandler_Exception
  37.      */
  38.     public function __construct($config)
  39.     {
  40.         if ($config instanceof Zend_Config) {
  41.             $config = $config->toArray();
  42.         } else if (!is_array($config)) {
  43.             /**
  44.              * @see Zend_Session_SaveHandler_Exception
  45.              */
  46.             require_once 'Zend/Session/SaveHandler/Exception.php';
  47.  
  48.             throw new Zend_Session_SaveHandler_Exception(
  49.                 '$config must be an instance of Zend_Config or array of key/value pairs containing '
  50.               . 'configuration options for Zend_Session_SaveHandler_Memcached .');
  51.         }
  52.  
  53.         foreach ($config as $key => $value) {
  54.             do {
  55.                 switch ($key) {
  56.                     case self::MEMCACHED:
  57.                         $this->createMemcached($value);
  58.                         break;
  59.                     case self::LIFETIME:
  60.                         $this->setLifetime($value);
  61.                         break;
  62.                     case self::OVERRIDE_LIFETIME:
  63.                         $this->setOverrideLifetime($value);
  64.                         break;
  65.                     default:
  66.                         // unrecognized options passed to parent::__construct()
  67.                         break 2;
  68.                 }
  69.                 unset($config[$key]);
  70.             } while (false);
  71.         }
  72.     }
  73.  
  74.     /**
  75.      * 创建memcached连接对象
  76.      *
  77.      * @return void
  78.      */
  79.     public function createMemcached($config){
  80.                 $this->_memcached = new Memcache;
  81.                 foreach ($config as $value){
  82.                         $this->_memcached->addServer($value['host'], $value['port'], $value['persistent'],
  83.                                                         $value['weight'], $value['timeout'],
  84.                                                         $value['retry_interval'],
  85.                                                         $value['status'],
  86.                                                                                 array($this,'_callback_memcache_failure'));
  87.                 }
  88.     }
  89.  
  90.         public function _callback_memcache_failure($host,$port){
  91.                 $this->_memcached->setServerParams($host, $port,5,15,false);
  92.         }
  93.  
  94.     public function __destruct()
  95.     {
  96.         Zend_Session::writeClose();
  97.     }
  98.    /**
  99.      * Set session lifetime and optional whether or not the lifetime of an existing session should be overridden
  100.      *
  101.      * $lifetime === false resets lifetime to session.gc_maxlifetime
  102.      *
  103.      * @param int $lifetime
  104.      * @param boolean $overrideLifetime (optional)
  105.      * @return Zend_Session_SaveHandler_Memcached
  106.      */
  107.     public function setLifetime($lifetime, $overrideLifetime = null)
  108.     {
  109.         if ($lifetime < 0) {
  110.             /**
  111.              * @see Zend_Session_SaveHandler_Exception
  112.              */
  113.             require_once 'Zend/Session/SaveHandler/Exception.php';
  114.             throw new Zend_Session_SaveHandler_Exception();
  115.         } else if (empty($lifetime)) {
  116.             $this->_lifetime = (int) ini_get('session.gc_maxlifetime');
  117.         } else {
  118.             $this->_lifetime = (int) $lifetime;
  119.         }
  120.  
  121.         if ($overrideLifetime != null) {
  122.             $this->setOverrideLifetime($overrideLifetime);
  123.         }
  124.  
  125.         return $this;
  126.     }
  127.     /**
  128.      * Retrieve session lifetime
  129.      *
  130.      * @return int
  131.      */
  132.     public function getLifetime()
  133.     {
  134.         return $this->_lifetime;
  135.     }
  136.     /**
  137.      * Set whether or not the lifetime of an existing session should be overridden
  138.      *
  139.      * @param boolean $overrideLifetime
  140.      * @return Zend_Session_SaveHandler_Memcached
  141.      */
  142.     public function setOverrideLifetime($overrideLifetime)
  143.     {
  144.         $this->_overrideLifetime = (boolean) $overrideLifetime;
  145.  
  146.         return $this;
  147.     }
  148.     public function getOverrideLifetime()
  149.     {
  150.         return $this->_overrideLifetime;
  151.     }
  152.     /**
  153.      * Retrieve session lifetime considering
  154.      *
  155.      * @param array $value
  156.      * @return int
  157.      */
  158.     public function open($save_path, $name)
  159.     {
  160.         $this->_sessionSavePath = $save_path;
  161.         $this->_sessionName     = $name;
  162.  
  163.         return true;
  164.     }
  165.     /**
  166.      * Retrieve session expiration time
  167.      *
  168.      * @param * @param array $value
  169.      * @return int
  170.      */
  171.     public function close()
  172.     {
  173.         return true;
  174.     }
  175.  
  176.     public function read($id)
  177.     {
  178.         $return = '';
  179.  
  180.         $value = $this->_memcached->get($id);                        //获取数据
  181.  
  182.         if ($value) {
  183.             if ($this->_getExpirationTime($value) > time()) {
  184.                 $return = $value['data'];
  185.             } else {
  186.                 $this->destroy($id);
  187.             }
  188.         }
  189.  
  190.         return $return;
  191.     }
  192.  
  193.     public function write($id, $data)
  194.     {
  195.         $return = false;
  196.  
  197.         $insertDate = array('modified' => time(),
  198.                               'data'     => (string) $data);
  199.  
  200.            $value = $this->_memcached->get($id);                        //获取数据
  201.  
  202.         if ($value) {
  203.             $insertDate['lifetime'] = $this->_getLifetime($value);
  204.  
  205.             if ($this->_memcached->replace($id,$insertDate)) {
  206.                 $return = true;
  207.             }
  208.         } else {
  209.             $insertDate['lifetime'] = $this->_lifetime;
  210.  
  211.             if ($this->_memcached->add($id, $insertDate,false,$this->_lifetime)) {
  212.                 $return = true;
  213.             }
  214.         }
  215.  
  216.         return $return;
  217.     }
  218.  
  219.     public function destroy($id)
  220.     {
  221.         $return = false;
  222.  
  223.         if ($this->_memcached->delete($id)) {
  224.             $return = true;
  225.         }
  226.  
  227.         return $return;
  228.     }
  229.  
  230.     public function gc($maxlifetime)
  231.     {
  232.         return true;
  233.     }
  234.  
  235.     protected function _getLifetime($value)
  236.     {
  237.         $return = $this->_lifetime;
  238.  
  239.         if (!$this->_overrideLifetime) {
  240.             $return = (int) $value['lifetime'];
  241.         }
  242.  
  243.         return $return;
  244.     }
  245.  
  246.     protected function _getExpirationTime($value)
  247.     {
  248.         return (int) $value['modified'] + $this->_getLifetime($value);
  249.     }
  250. }
  251.  
  252. //使用方法也做了相应的调整:
  253. // Memcached Config
  254. $_MemcachedConfig = array(
  255.     'memcached'=> array(
  256.         array(
  257.             'host'=>'www.yoohouse.com',
  258.             'port'=>12000,
  259.                 'persistent'=>true,
  260.                 'weight' => 1,
  261.                     'timeout' => 5,
  262.                     'retry_interval' => 15,
  263.                     'status' => true
  264.         ),
  265.         array(
  266.             'host'=>'www.yoohouse.com',
  267.             'port'=>12001,
  268.                 'persistent'=>true,
  269.                 'weight' => 1,
  270.                     'timeout' => 5,
  271.                     'retry_interval' => 15,
  272.                     'status' => true
  273.         )
  274.     ),
  275.     'lifetime' =>86400
  276. );
  277.  
  278. // Zend Session 设置、启动。Memcached使用。
  279. Zend_Session::setSaveHandler(new Zend_Session_SaveHandler_Memcached($_MemcachedConfig));
  280. Zend_Session::start();
  281.  
  282. //同一个config数组还可以同时用于zend_cache:
  283. // Zend Cache 缓存设置,Memcached使用。
  284. $frontendOptions = array(
  285.    'lifeTime' => 7200,
  286.    'automatic_serialization' => true
  287. );
  288. $backendOptions = array(
  289.     'servers' => $_MemcachedConfig['memcached']
  290. );
  291. $cache = Zend_Cache::factory('Core',
  292.                              'Memcached',
  293.                              $frontendOptions,
  294.                              $backendOptions);
以上,如有问题欢迎指教

Memcached Zendframework SESSION 應用(转)


24 6月
在zend framework中,已经可以将session存储在数据库中了,不过还不支持memcache,我简单得实现了一下。 下面是SaveHandler,文件名为 :Memcached.php ,将其放在 /Zend/Session/SaveHandler 目录下,代码如下(需要有php_memcache支持,因为字符长度限制,我把部分注释去掉了):
  1. <?php
  2. require_once 'Zend/Session.php';
  3. require_once 'Zend/Config.php';
  4.  
  5. class Zend_Session_SaveHandler_Memcached implements Zend_Session_SaveHandler_Interface
  6. {
  7.     const LIFETIME          = 'lifetime';
  8.     const OVERRIDE_LIFETIME = 'overrideLifetime';
  9.     const MEMCACHED            = 'memcached';
  10.     protected $_lifetime = false;
  11.     protected $_overrideLifetime = false;
  12.     protected $_sessionSavePath;
  13.     protected $_sessionName;
  14.     protected $_memcached;
  15.     /**
  16.      * Constructor
  17.      *
  18.      * $config is an instance of Zend_Config or an array of key/value pairs containing configuration options for
  19.      * Zend_Session_SaveHandler_Memcached . These are the configuration options for
  20.      * Zend_Session_SaveHandler_Memcached:
  21.      *
  22.      *
  23.      *      sessionId       => The id of the current session
  24.      *      sessionName     => The name of the current session
  25.      *      sessionSavePath => The save path of the current session
  26.      *
  27.      * modified            => (string) Session last modification time column
  28.      *
  29.      * lifetime          => (integer) Session lifetime (optional; default: ini_get('session.gc_maxlifetime'))
  30.      *
  31.      * overrideLifetime => (boolean) Whether or not the lifetime of an existing session should be overridden
  32.      *      (optional; default: false)
  33.      *
  34.      * @param Zend_Config|array $config      User-provided configuration
  35.      * @return void
  36.      * @throws Zend_Session_SaveHandler_Exception
  37.      */
  38.     public function __construct($config)
  39.     {
  40.         if ($config instanceof Zend_Config) {
  41.             $config = $config->toArray();
  42.         } else if (!is_array($config)) {
  43.             /**
  44.              * @see Zend_Session_SaveHandler_Exception
  45.              */
  46.             require_once 'Zend/Session/SaveHandler/Exception.php';
  47.  
  48.             throw new Zend_Session_SaveHandler_Exception(
  49.                 '$config must be an instance of Zend_Config or array of key/value pairs containing '
  50.               . 'configuration options for Zend_Session_SaveHandler_Memcached .');
  51.         }
  52.  
  53.         foreach ($config as $key => $value) {
  54.             do {
  55.                 switch ($key) {
  56.                     case self::MEMCACHED:
  57.                         $this->createMemcached($value);
  58.                         break;
  59.                     case self::LIFETIME:
  60.                         $this->setLifetime($value);
  61.                         break;
  62.                     case self::OVERRIDE_LIFETIME:
  63.                         $this->setOverrideLifetime($value);
  64.                         break;
  65.                     default:
  66.                         // unrecognized options passed to parent::__construct()
  67.                         break 2;
  68.                 }
  69.                 unset($config[$key]);
  70.             } while (false);
  71.         }
  72.     }
  73.  
  74.     /**
  75.      * 创建memcached连接对象
  76.      *
  77.      * @return void
  78.      */
  79.     public function createMemcached($config){
  80.       $mc = new Memcache;
  81.       foreach ($config as $value){
  82.         $mc->addServer($value['host'], $value['port']);
  83.       }
  84.       $this->_memcached = $mc;
  85.     }
  86.  
  87.     public function __destruct()
  88.     {
  89.         Zend_Session::writeClose();
  90.     }
  91.    /**
  92.      * Set session lifetime and optional whether or not the lifetime of an existing session should be overridden
  93.      *
  94.      * $lifetime === false resets lifetime to session.gc_maxlifetime
  95.      *
  96.      * @param int $lifetime
  97.      * @param boolean $overrideLifetime (optional)
  98.      * @return Zend_Session_SaveHandler_Memcached
  99.      */
  100.     public function setLifetime($lifetime, $overrideLifetime = null)
  101.     {
  102.         if ($lifetime < 0) {
  103.             /**
  104.              * @see Zend_Session_SaveHandler_Exception
  105.              */
  106.             require_once 'Zend/Session/SaveHandler/Exception.php';
  107.             throw new Zend_Session_SaveHandler_Exception();
  108.         } else if (empty($lifetime)) {
  109.             $this->_lifetime = (int) ini_get('session.gc_maxlifetime');
  110.         } else {
  111.             $this->_lifetime = (int) $lifetime;
  112.         }
  113.  
  114.         if ($overrideLifetime != null) {
  115.             $this->setOverrideLifetime($overrideLifetime);
  116.         }
  117.  
  118.         return $this;
  119.     }
  120.     /**
  121.      * Retrieve session lifetime
  122.      *
  123.      * @return int
  124.      */
  125.     public function getLifetime()
  126.     {
  127.         return $this->_lifetime;
  128.     }
  129.     /**
  130.      * Set whether or not the lifetime of an existing session should be overridden
  131.      *
  132.      * @param boolean $overrideLifetime
  133.      * @return Zend_Session_SaveHandler_Memcached
  134.      */
  135.     public function setOverrideLifetime($overrideLifetime)
  136.     {
  137.         $this->_overrideLifetime = (boolean) $overrideLifetime;
  138.  
  139.         return $this;
  140.     }
  141.  
  142.     public function getOverrideLifetime()
  143.     {
  144.         return $this->_overrideLifetime;
  145.     }
  146.     /**
  147.      * Retrieve session lifetime considering
  148.      *
  149.      * @param array $value
  150.      * @return int
  151.      */
  152.     public function open($save_path, $name)
  153.     {
  154.         $this->_sessionSavePath = $save_path;
  155.         $this->_sessionName     = $name;
  156.  
  157.         return true;
  158.     }
  159.     /**
  160.      * Retrieve session expiration time
  161.      *
  162.      * @param * @param array $value
  163.      * @return int
  164.      */
  165.     public function close()
  166.     {
  167.         return true;
  168.     }
  169.  
  170.     public function read($id)
  171.     {
  172.         $return = '';
  173.  
  174.         $value = $this->_memcached->get($id);                        //获取数据
  175.  
  176.         if ($value) {
  177.             if ($this->_getExpirationTime($value) > time()) {
  178.                 $return = $value['data'];
  179.             } else {
  180.                 $this->destroy($id);
  181.             }
  182.         }
  183.  
  184.         return $return;
  185.     }
  186.  
  187.     public function write($id, $data)
  188.     {
  189.         $return = false;
  190.                      
  191.         $insertDate = array('modified' => time(),
  192.                               'data'     => (string) $data);
  193.                              
  194.            $value = $this->_memcached->get($id);                        //获取数据
  195.  
  196.         if ($value) {
  197.             $insertDate['lifetime'] = $this->_getLifetime($value);
  198.            
  199.             if ($this->_memcached->replace($id,$insertDate)) {
  200.                 $return = true;
  201.             }
  202.         } else {
  203.             $insertDate['lifetime'] = $this->_lifetime;
  204.  
  205.             if ($this->_memcached->add($id, $insertDate,false,$this->_lifetime)) {
  206.                 $return = true;
  207.             }
  208.         }
  209.        
  210.         return $return;
  211.     }
  212.  
  213.     public function destroy($id)
  214.     {
  215.         $return = false;
  216.  
  217.         if ($this->_memcached->delete($id)) {
  218.             $return = true;
  219.         }
  220.  
  221.         return $return;
  222.     }
  223.  
  224.     public function gc($maxlifetime)
  225.     {
  226.         return true;
  227.     }
  228.  
  229.     protected function _getLifetime($value)
  230.     {
  231.         $return = $this->_lifetime;
  232.  
  233.         if (!$this->_overrideLifetime) {
  234.             $return = (int) $value['lifetime'];
  235.         }
  236.  
  237.         return $return;
  238.     }
  239.  
  240.     protected function _getExpirationTime($value)
  241.     {
  242.         return (int) $value['modified'] + $this->_getLifetime($value);
  243.     }      
  244. }
  245.  
  246. 配置(可以添加多台memcache服务器,做分布式):
  247. $config = array(
  248.     'memcached'=> array(
  249.         array(
  250.             'host'=>'192.168.0.1',
  251.             'port'=>11211
  252.         )
  253.     ),
  254.     'lifetime' =>123334
  255. );
  256. //create your Zend_Session_SaveHandler_DbTable and
  257. //set the save handler for Zend_Session
  258. Zend_Session::setSaveHandler(new Zend_Session_SaveHandler_Memcached($config));
  259. //start your session!
  260. Zend_Session::start();
原文地址 http://hi.baidu.com/billdkj/blog/item/049d04f0b2a896c47831aa1c.html

Memcached 安装配置 整理


23 6月
Memcached需要libevent支持,所以先下载libevent安装:
  1. ./configure --prefix=/usr/local
  2. make
  3. make install
验证安装是否成功:
  1. ls -al /usr/local/lib | grep libevent
安装memcached
  1. ./configure --with-libevent=/usr/local
  2. make
  3. make install
验证:
  1. ls -al /usr/local/bin/mem*
测试:
  1. /usr/local/bin/memecached -h
若出现类似:
memcached: error while loading shared libraries: libevent-1.4.so.2: cannot open shared object file: No such file or directory
修复:
  1. LD_DEBUG=libs memcached -v
查看memcached的libs的路径 选择其中一条做ln:
  1. ln -s /usr/lib/libevent-1.4.so.2.1.3 /usr/lib64/libevent-1.4.so.2
新手注意ln是后面连到前面,也就是说,后面那个是原本不存在的,需要连接的。 启动memcached(可在/etc/rc.local中寫入以便每次重啟后自動啟動):
  1. /usr/local/bin/memcached -d -m 10 -u root -l 192.168.0.200 -p 12000 -c 256 -P /tmp/memcached.pid
-d选项是启动一个守护进程, -m是分配给Memcache使用的内存数量,单位是MB,我这里是10MB, -u是运行Memcache的用户,我这里是root, -l是监听的服务器IP地址,如果有多个地址的话,我这里指定了服务器的IP地址192.168.0.200, -p是设置Memcache监听的端口,我这里设置了12000,最好是1024以上的端口, -c选项是最大运行的并发连接数,默认是1024,我这里设置了256,按照你服务器的负载量来设定, -P是设置保存Memcache的pid文件,我这里是保存在 /tmp/memcached.pid 如果要结束Memcache进程,执行:
  1. kill `cat /tmp/memcached.pid`
也可以启动多个守护进程,不过端口不能重复。 最后记得重启apache 附转: 安装Memcache的PHP扩展 1.在http://pecl.php.net/package/memcache 选择相应想要下载的memcache版本。 2.安装PHP的memcache扩展
tar vxzf memcache-2.2.1.tgz cd memcache-2.2.1 /usr/local/php/bin/phpize ./configure –enable-memcache –with-php-config=/usr/local/php/bin/php-config –with-zlib-dir make make install
3.上述安装完后会有类似这样的提示:
Installing shared extensions: /usr/local/php/lib/php/extensions/no-debug-non-zts-2007xxxx/
4.把php.ini中的extension_dir = “./”修改为
extension_dir = “/usr/local/php/lib/php/extensions/no-debug-non-zts-2007xxxx/”
5.添加一行来载入memcache扩展:extension=memcache.so Memcache环境测试: 运行下面的php文件,如果有输出This is a test!,就表示环境搭建成功。开始领略Memcache的魅力把!
  1. $mem = new Memcache;
  2. $mem->connect("127.0.0.1", 12000);
  3. $mem->set("key", "This is a test!", 0, 60);
  4. $val = $mem->get("key");
  5. echo $val;
安全相關: 基本通過防火墻實現,只允許特定IP地址端口進行訪問即可:
  1. iptables -I RH-Firewall-1-INPUT -p tcp -s 211.144.121.81 --dport 12000 -j ACCEPT
監視memcached使用情況: memcachephp 参考: http://www.ccvita.com/257.html http://pjluo.javaeye.com/blog/200266 P.S.  php的扩展和libevent可在Cpanel的WHM中,通过Install a RPM和Module Installers直接安装。

貓熊寶寶幼齒園

姜經緯的博客