ITKeyword,专注技术干货聚合推荐

注册 | 登录

memcache笔记

json_ligege 2016-06-17

推荐:php扩展--memcache

Memcache是什么? Memcache是一个自由和开放源代码、高性能、分配的内存对象缓存系统。用于加速动态web应用程序,减轻数据库负载。  它可以应对任意多个连接,

一、Memcache概述出现的原因:随着数据量的增大,访问的集中,使得数据库服务器的负担加重,数据库响应恶化,网站显示延迟等memcache:是高性能的分布式内存缓存服务器.通过缓存数据库的查询结果,减少数据库的访问次数,以提高web应用的速度,提高可扩展性.缓存方式是将缓存结果存储在内存中,通过内存来维护一个hash表.Memcache是一个c/s软件,默认间通过端口为11211二、Memcache工作原理memcached是以守护程序方式运行于一个或多个服务器中,随时会接收客户端的连接和操作。原理:第一次:web应用访问数据库,将查询的结果显示到应用的页面,并将其查询结果放入memcache中缓存第二次:web访问mecache服务器,如果有数据,直接显示到web应用,否则查询数据库,显示,在进行缓存到memcahe 三、为什么要在WEB中使用Memcache原因:数据量的增大,访问的集中,使得数据库服务器的负担加重,数据库响应恶化,网站显示延迟等,解决方法:这时就需要减少服务器的压力,减少数据库检索次数,可以建立数据库和web应用的中间缓存层来处理memcache作为高速运行的分布式内存缓存服务器,具有以下几点,完全满足需求:1 本身是开源的,占用资源小,协议简单的软件,将数据库和web之间的数据缓存,减少数据库的检索次数,减少数据库的i/o2 基于livevent的时间处理,因为libevent库将linux,bsd,solaris等这些操作系统上的kqueue等时间处理功能功能封装成统一接口,面对连接数增加,也能在linux,bsd,solaris等操作系统上发挥其高性能(i/o).3 存储方式:内置于内存存储方式,存取的效率高,执行的速度快4 memcache不互相通信的分布式:同个客户端使得key有规律的封装,实现memcache实现分布式,采用多台cached服务器,增加缓存的横向延伸四、安装Memcache服务器(Linux和Window上分别安装)Linux下1 安装libevent时./configure –with-libevent=/usrMake && make install2 安装memcached./configure –with-libevent=/usrMake && make install3 启动Memcahced –d –m 128 –l 192.168.1.111 –p 11211 –u root停止: kill `cat /tmp/memcached.pid`;Killall memcachedWindows下Memcahced.exe -d install [uninstall] Memcached.exe –d -m 50 –l 127.0.0.1 -p 11211 start五、Memcached服务器的管理(启动)Linux下启动memcached # /usr/local/bin/memcached -d -m 2048 -u root -l 192.168.1.20 -p 12111 -c 1024 -P /tmp/memcached.pid 参数说明: -d 启动为守护进程 -m <num> 分配给Memcached使用的内存数量,单位是MB,默认为64MB -u <username> 运行Memcached的用户,仅当作为root运行时 -l <ip_addr> 监听的服务器IP地址,默认为环境变量INDRR_ANY的值 -p <num> 设置Memcached监听的端口,最好是1024以上的端口 -c <num> 设置最大并发连接数,默认为1024 -P <file> 设置保存Memcached的pid文件,与-d选择同时使用 Windows下安装. 然后开始 memcached -d startmemcached的基本设置:-p 监听的端口 -l 连接的IP地址, 默认是本机 -d start 启动memcached服务 -d restart 重起memcached服务 -d stop|shutdown 关闭正在运行的memcached服务 -d install 安装memcached服务 -d uninstall 卸载memcached服务 -u 以的身份运行 (仅在以root运行的时候有效) -m 最大内存使用,单位MB。默认64MB ,最大好像2G-M 内存耗尽时返回错误,而不是删除项 -c 最大同时连接数,默认是1024 -f 块大小增长因子,默认是1.25 -n 最小分配空间,key+value+flags默认是48 -h 显示帮助六、操作Memcached (命令行方式telnet作为客户端)CommandDescriptionExamplegetReads a valueget mykeysetSet a key unconditionallyset mykey 0 60 5addAdd a new keyadd newkey 0 60 5replaceOverwrite existing keyreplace key 0 60 5appendAppend data to existing keyappend key 0 60 15prependPrepend data to existing keyprepend key 0 60 15incrIncrements numerical key value by given numberincr mykey 2decrDecrements numerical key value by given numberdecr mykey 5deleteDeletes an existing keydelete mykeyflush_allInvalidate specific items immediatelyflush_allInvalidate all items in n secondsflush_all 900statsPrints general statisticsStatsPrints memory statisticsstats slabsPrints memory statisticsstats mallocPrint higher level allocation statisticsstats itemsstats detailstats sizesResets statisticsstats resetversionPrints server version.versionverbosityIncreases log levelverbosityquitTerminate telnet sessionquit1 Memcache的协议的错误部分主要是三个错误提示之提示指令:

普通错误信息:ERROR\r\n

客户端错误:CLIENT_ERROR <错误信息>\r\n

服务器端错误:SERVER_ERROR <错误信息>\r\n2 [ 数据保存指令]

数据保存是基本的功能,就是客户端通过命令把数据返回过来,服务器端接收后进行处理。

A 指令格式:<命令> <键> <标记> <有效期> <数据长度>\r\n<键key> :就是保存在服务器上唯一的一个表示符<标记flag> 一个16位的无符号整形,用来设置服务器端跟客户端一些交互的操作<有效期>是数据在服务器上的有效期限,如果是0,则数据永远有效,单位是秒,Memcache服务器端会把一个数据的有效期设置为当前Unix时间+设置的有效时间<数据长度>块数据的长度,一般在这个个长度结束以后下一行跟着block data数据内容,发送完数据以后,客户端一般等待服务器端的返回,服务器端的返回:数据保存成功(STORED\r\n),数据保存失败(NOT_STORED\r\n),一般是因为服务器端这个数据key已经存在了B 主要是三个储存数据的三个命令, set, add, replace

set 命令是保存一个叫做key的数据到服务器上

add 命令是添加一个数据到服务器,但是服务器必须这个key是不存在的,能够保证数据不会被覆盖

replace 命令是替换一个已经存在的数据,如果数据不存在,就是类似set功能

3 [ 数据提取命令]get指令,格式是:get <键>*\r\n <键>key是是一个不为空的字符串组合,发送这个指令以后,等待服务器的返回。如果服务器端没有任何数据,则是返回:END\r\n,证明没有不存在这个key,没有任何数据,如果存在数据,则返回指定格式: VALUE <键> <标记> <数据长度>\r\n

4 [ 数据删除指令]

delete <键> <超时时间>\r\n

<超时时间> - timeout

按照秒为单位,这个是个可选项,如果你没有指定这个值,那么服务器上key数据将马上被删除,如果设置了这个值,那么数据将在超时时间后把数据清除,该项缺省值是0,就是马上被删除,删除数据后,服务器端会返

DELETED\r\n:删除数据成功

NOT_FOUND\r\n:这个key没有在服务器上找到

flush_all指令这个指令执行后,服务器上所有缓存的数据都被删除,并且返回

5 [其他指令]当前所有Memcache服务器运行的状态信息:stats如果只是想获取部分项目的信息,可以指定参数,格式:

stats <参数>\r\n:这个指令将只返回指定参数的项目状态信息。当前版本信息:version;退出:quit//统计stats itemsstats sizes96 1stats slabs:机制分配,内存管理信息Stats:Pidmemcache服务器的进程IDuptime服务器已经运行的秒数Time服务器当前的unix时间戳versionmemcache版本pointer_size当前操作系统的指针大小(32位系统一般是32bit)rusage_user进程的累计用户时间rusage_system进程的累计系统时间curr_items服务器当前存储的items数量Total_items从服务器启动以后存储的items总数量Bytes当前服务器存储items占用的字节数curr_connections当前打开着的连接数Total_connections从服务器启动以后曾经打开过的连接数connection_structures服务器分配的连接构造数cmd_getget命令(获取)总请求次数cmd_setset命令(保存)总请求次数get_hits总命中次数get_misses总未命中次数evictions为获取空闲内存而删除的items数(分配给memcache的空间用满后需要删除旧的items来得到空间分配给新的items)Bytes_read总读取字节数(请求字节数)Bytes_written总发送字节数(结果字节数)Limit_maxbytes分配给memcache的内存大小(字节)threads当前线程数在php里也可以用getStats()来查看。七、如何遍历memcache1. <?php2. $host='192.168.15.225';3. $port=11211;4. $mem=new Memcache();5. $mem->connect($host,$port);6. $items=$mem->getExtendedStats (‘items’);7. $items=$items["$host:$port"]['items'];8. for($i=0,$len=count($items);$i<$len;$i++){9. $number=$items[$i]['number'];10. $str=$mem->getExtendedStats ("cachedump",$number,0);11. $line=$str["$host:$port"];12. if( is_array($line) && count($line)>0){13. foreach($line as $key=>$value){14. echo $key.'=>';15. print_r($mem->get($key));16. echo "\r\n";17. }18. }19. }20. ?>八、在PHP程序中使用Memcacheda 在PHP安装Memcache扩展b 在PHP什么地方使用memcache一、 数据库读出来的数据(select)使用memcache处理二、 在会话控制session中使用c 实例

Memcache面向对象的常用接口包括:

Memcache::connect -- 打开一个到Memcache的连接

Memcache::pconnect -- 打开一个到Memcache的长连接

Memcache::close -- 关闭一个Memcache的连接

Memcache::set -- 保存数据到Memcache服务器上

Memcache::get -- 提取一个保存在Memcache服务器上的数据

Memcache::replace -- 替换一个已经存在Memcache服务器上的项目(功能类似Memcache::set)

Memcache::delete -- 从Memcache服务器上删除一个保存的项目

Memcache::flush -- 刷新所有Memcache服务器上保存的项目(类似于删除所有的保存的项目)

Memcache::getStats -- 获取当前Memcache服务器运行的状态

Memcache::addServer -- 分布式服务器添加一个服务器 //创建memcache对象$mem=new Memcache;//连接memcache服务器$mem->connect('localhost','11211');//长连接memcache服务器//$mem->pconnect('localhost','11211');/*添加多个服务器*///$mem->addServer('url','port');//$mem->addServer('www.baidu.com','port');//$mem->addServer('192.168.90.112','port');if($mem->add('test','this is test',MEMCACHE_COMPRESSED,3600)){echo '添加或修改数据成功<br>';}else{//输出memcache服务器中的值echo $mem->get('test').'<br>';}if($mem->set('test','lampbrother',MEMCACHE_COMPRESSED,3600)){echo '修改数据成功<br>';}//存取记录$mem->add('kkk','vvvvvv');echo $mem->get('kkk').'-----<br>';//删除一条记录$mem->delete('kkk');echo $mem->get('kkk').'-----<br>';/* 存储对象 */class Person{private $name;private $age;function __construct($name,$age){$this->name=$name;$this->age=$age;}}if($mem->add('mem_obj',new Person('张三',23))){/** 对象的存数方式* O:6:"Person":2:{s:12:"Pers

推荐:PHP 与Memcache 分布式

在一台或者多台机器启用一个或者多个进程,这里是在一台机器启 用两个进程,使用两个端口: # /usr/local/bin/memcached -p 11211 -d -u hualiangxie # /usr/loc

onname";s:6:"寮犱笁";s:11:"Personage";i:23;} * */echo '添加数据成功';}//删除所有记录$mem->flush();/**************分割线***********/echo '=====================<br>';echo $mem->get('test').'<br>';/*//创建memcache对象$memcache=new memcache(); //连接服务器端add(),或者增加新的memcache服务器addServer()$mem->pconnect('localhost','11211');//读取数据$data=$memcache->get('key_v');//判断是否存在if($data){//直接使用在memcache端获得资源显示到页面}else{//不存在时,从数据库去的资源显示页面//并将获得结果存入memcache服务器端}$mem->close();注意:1 同一个项目安装多次时,key要有前缀来进行区分2 一个项目中有多条相同的sql语句,可以使用sql语句key值,同种sql结果保证使用一次数据库服务器,减少数据库服务器压力.防止大小写等不必要的异常错误,进行大小写转换进行md5加密,可以保证32为一致性,同时减少了存储容量.还可以使用字符串函数进行md5加密后截取,存储容量更短*/复制代码 1. //连接memcache 2. $m = new Memcache(); 3. $m->connect('localhost', 11211); 4. 5. //连接数据库的我就不写了. 6. 7. $sql = 'SELECT * FROM users'; 8. $key = md5($sql); //md5 SQL命令 作为 memcache的唯一标识符 9. $rows = $m->get($key); //先重memcache获取数据 10. 11. if (!$rows) { 12. //如果$rows为false那么就是没有数据咯, 那么就写入数据 13. $res = mysql_query($sql); 14. $rows = array(); 15. while ($row = mysql_fetch_array($res)) { 16. $rows[] = $row; 17. } 18. $m->add($key, $rows); //这里写入重数据库中获取的数据, 可以设置缓存时间, 具体时间设置多少, 根据自己需求吧. 19. } 20. 21. var_dump($rows); //打印出数据 22. //上面第一次运行程序时, 因为还没有缓存数据, 所以会读取一次数据库, 当再次访问程序时, 就直接重memcache获取了.九、Memcache的安全(不让别人访问)[ 内网访问]最好把两台服务器之间的访问是内网形态的,一般是Web服务器跟Memcache服务器之间。普遍的服务器都是有两块网卡,一块指向互联网,一块指向内网,那么就让Web服务器通过内网的网卡来访问Memcache服务器,我们Memcache的服务器上启动的时候就监听内网的IP地址和端口,内网间的访问能够有效阻止其他非法的访问。# memcached -d -m 1024 -u root -l 192.168.0.200 -p 11211 -c 1024 -P /tmp/memcached.pidMemcache服务器端设置监听通过内网的192.168.0.200的ip的11211端口,占用1024MB内存,并且允许最大1024个并发连接[ 设置防火墙]防火墙是简单有效的方式,如果却是两台服务器都是挂在网的,并且需要通过外网IP来访问Memcache的话,那么可以考虑使用防火墙或者代理程序来过滤非法访问。一般我们在Linux下可以使用iptables或者FreeBSD下的ipfw来指定一些规则防止一些非法的访问,比如我们可以设置只允许我们的Web服务器来访问我们Memcache服务器,同时阻止其他的访问。# iptables -F# iptables -P INPUT DROP# iptables -A INPUT -p tcp -s 192.168.0.2 --dport 11211 -j ACCEPT# iptables -A INPUT -p udp -s 192.168.0.2 --dport 11211 -j ACCEPT上面的iptables规则就是只允许192.168.0.2这台Web服务器对Memcache服务器的访问,能够有效的阻止一些非法访问,相应的也可以增加一些其他的规则来加强安全性,这个可以根据自己的需要来做。Session()跨域的解决方案:1)使用数据库来实现2)自己写server端,通过改写session处理函数来请求3)使用nfs等跨机存储来保存session4)使用memcache来保存5)使用zend platform提供的解决方案其中的1-4都是通过改用可以跨机的储存机制,再使用session_set_save_handler()来实现以下是一些我在使用memcache来实现时的一些记录:1)使用类来实现时,各回调函数都定义为静态方法,在类的构造中使用session_set_save_handler注册回调函数, 如:session_set_save_handler(array('memSession', 'open'),array('memSession', 'close'), array('memSession', 'read'), array('memSession', 'write'),array('memSession', 'destroy'),array('memSession', 'gc'));memSession为类名,要使用session,则先new memSession,再session_start();2)生存期和垃圾回收memCache的set命令有生存期,即使用set命令添加值时,可加上lifetime,此时间可以作为session的生存期,用户在此时间内没有动作,则会失效,但有动作则不会失效(因为每一个脚本结束时,都会执行write和close,此时lifetime就会被更新了),当然,如果使用cookie传递SID,则控制SESSION生存期可以用:ini_set('session.cookie_lifetime',time)来设定,这其实是控制cookie的有效时间,如果session赖以生存的cookie消失了,当然session也就活不了,使用cookie_lifetime来控制的话,无论有无动作,都将在指定的时间后过时gc是指垃圾回收,在session中是指清理过期的session数据,影响的参数有:session.gc_maxlifetime 被视为垃圾前的生存期,超过此时间没有动作,数据会被清走注意的是,gc不是每次启动会话都会被执行,而是由session.gc_probability 和 session.gc_divisor的比率决定的结论:控制SESSION的生存期有几种方法一是cookie_lifttime,这种方式无论有无动作,都会在指定时间内销毁二是在read中根椐保存时间控制,此方法在有动作时时间会一直有效三设定session.gc_probability 和 session.gc_divisor的比率为1(即每次会话都会启用gc),再设定gc.maxlifetime来指定生存期,此方法也是在用户有动作时时间一直有效3)回调函数的执行时机open 在运行session_start()时执行read 在运行session_start()时执行,因为在session_start时,会去read当前session数据并写入$_SESSION变量destroy 在运行session_destroy()时执行close 在脚本执行完成或调用session_write_close() 或 session_destroy()时被执行,即在所有session操作完成后被执行gc 执行概率由session.gc_probability 和 session.gc_divisor的值决定,时机是在open,read之后,即session_start会相继执行open,read和gcwrite 此方法在脚本结束和使用session_write_close()强制提交SESSION数据时执行结论:session_start //执行open(启动会话),read(读取session数据至$_SESSION),gc(清理垃圾)脚本中间所有对$_SESSION的操作均不会调用这些回调函数session_destroy //执行destroy,销毁当前session(一般是删除相应的记录或文件),相应地,此回调函数销毁的只是session的数据,但此时var_dump一下$_SESSION变量,仍然有值的,但此值不会在close后被write回去session_write_close() //执行write和close,保存$_SESSION至存储,如不手工使用此方法,则会在脚本结束时被自动执行清晰了以上信息,将对你清楚了解SESSION的工作原理有很大的帮助...4)直接使用memcache作session处理在我写了一系列的memcache来保存session的代码后,无意中发现,可以直接在php.ini中设定使用memcache作为session处理,而无须另外编码,方法是:修改php.ini中的以下值session.save_handler = memcachesession.save_path = 'tcp://host1:11211' #有多个时直接用","分隔即可 如果只想在特定的应用里使用memcache储存session,可以使用ini_set的方法对以上两个参数进行设定要测试一下是否真正用上了memcache,可以先捕足到使用的PHPSESSID,再作为KEY用memcach去读一下,就清楚了这几天做某个产品的时候遇到一个小问题,现象比较诡异产品用了两台分布式的memcached服务器某一个计数器取回来的数偶尔会不对,最后定位在php memcache client的failover机制上面。我们知道,在memcached分布式环境下,某一个key是通过hash计算,分配到某一个memcached上面的如果php.ini里面 memcache.allow_failover = 1的时候,在分布式环境下,某一台memcached出问题的话,会自动到其他的memcached尝试就会出现上面的问题,原因如下:这个key是hash到服务器A的,但是服务器A正好一瞬间连不上(网络或者其他问题),PHP就会去另一台服务器B去尝试。经过很偶然发生的网络问题和很多次increment操作,有可能两台服务器上面都有这个key,而且值不一样……get的时候有可能取到不同的值如果对数据一致性要求很严格的话,可以关掉这个参数 memcache.allow_failover = 0,嗯,问题解memcache.allow_failover 一个布尔值,用于控制当连接出错时 Memcache 扩展是否故障转移到其他服务器上。默认值为 1 (true)。 memcache.max_failover_attempts 一个整型值,用于限制连接到持久性数据或检索数据的服务器数目。如果 memcache.allow_failover 为 false,则将忽略此参数。默认值为 20。 memcache.chunk_size 一个整型值,用于控制数据传输的大小。默认值为 8192 字节 (8 KB),但是如果设置为 32768 (32 KB),则可以获得更好的性能。 memcache.default_port 另一个整型值,用于设置连接到 Memcache 所使用的 TCP 端口。除非您修改它,否则默认值为无特权的高端口 11211。session.save_handler = memcachesession.save_path = "tcp://host:port?persistent=1&weight=2&timeout=2&retry_interval=15,tcp://host2:port2"Session_保存在memcache中:class MemSession {private static $handler=null;private static $lifetime=null;private static $time = null;const NS='session_';private static function init($handler){self::$handler=$handler;self::$lifetime=ini_get('session.gc_maxlifetime');self::$time=time();}public static function start(Memcache $memcache){self::init($memcache);session_set_save_handler(array(__CLASS__, 'open'),array(__CLASS__, 'close'),array(__CLASS__, 'read'),array(__CLASS__, 'write'),array(__CLASS__, 'destroy'),array(__CLASS__, 'gc'));session_start();}public static function open($path, $name){return true;}public static function close(){return true;}public static function read($PHPSESSID){$out=self::$handler->get(self::session_key($PHPSESSID));if($out===false || $out == null)return '';return $out;}public static function write($PHPSESSID, $data){$method=$data ? 'set' : 'replace';return self::$handler->$method(self::session_key($PHPSESSID), $data, MEMCACHE_COMPRESSED, self::$lifetime);}public static function destroy($PHPSESSID){return self::$handler->delete(self::session_key($PHPSESSID));}public static function gc($lifetime){return true;}private static function session_key($PHPSESSID){$session_key=self::NS.$PHPSESSID;return $session_key;} }$memcache=new Memcache;$memcache->connect("localhost", 11211) or die("could not connect!");MemSession::start($memcache);1 只直接使用session_strat();2 将session.save_handler=memcachesession.save_path = "tcp://host:port?persistent=1&weight=2&timeout=2&retry_interval=15,tcp://host2:port2"

推荐:关于APC(Alternative PHP Cache)和MemCache

http://slj.me/2009/04/apcalternative-php-cache-memcache/ APC(Alternative PHP Cache) APC是一种对PHP有效的开放源高速缓冲储存器工具,它能够缓存opcode的php

一、Memcache概述出现的原因:随着数据量的增大,访问的集中,使得数据库服务器的负担加重,数据库响应恶化,网站显示延迟等memcache:是高性能的分布式内存缓存服务器.通过缓存数据库的查询结

相关阅读排行


用户评论

游客

相关内容推荐

最新文章

×

×

请激活账号

为了能正常使用评论、编辑功能及以后陆续为用户提供的其他产品,请激活账号。

您的注册邮箱: 修改

重新发送激活邮件 进入我的邮箱

如果您没有收到激活邮件,请注意检查垃圾箱。