我使用的是CentOS 6.4系统,安装的Memcached版本为1.4.20。这里,记录一下安装配置的过程,以及如何使用一些常用的客户端来访问Memcached存储的数据。
安装配置
首先,编译、安装、配置libevent库,执行如下命令:
2 | tar xvzf libevent-1.4.14b-stable. tar .gz |
3 | ln -s /usr/ local /libevent-1.4.14b-stable /usr/ local /libevent |
然后,编译、安装、配置Memcached,执行如下命令行:
2 | tar xvzf memcached-1.4.20. tar .gz |
3 | ln -s /usr/ local /memcached-1.4.20 /usr/ local /memcached |
4 | ./configure --with-libevent=/usr/ local /libevent/ |
如果没有出错,安装成功。
管理memcached服务
一般情况下,简单地可以使用类似如下形式,启动Memcached服务:
1 | /usr/local/bin/memcached -d -m 64 -I 20m -u root -l 192.168.4.86 -p 11211 -c 1024 -P /usr/local/memcached/memcached.pid |
上述命令行中,基于上面各个选项,以及其他一些选项的含义,说明如下表所示:
选项 | 含义说明 |
-d | 指定memcached进程作为一个守护进程启动 |
-m <num> | 指定分配给memcached使用的内存,单位是MB |
-u <username> | 运行memcached的用户 |
-l <ip_addr> | 监听的服务器IP地址,如果有多个地址的话,使用逗号分隔,格式可以为“IP地址:端口号”,例如:-l 指定192.168.0.184:19830,192.168.0.195:13542;端口号也可以通过-p选项指定 |
-p <num> | Memcached监听的端口,要保证该端口号未被占用 |
-c <num> | 设置最大运行的并发连接数,默认是1024 |
-R <num> | 为避免客户端饿死(starvation),对连续达到的客户端请求数设置一个限额,如果超过该设置,会选择另一个连接来处理请求,默认为20 |
-k | 设置锁定所有分页的内存,对于大缓存应用场景,谨慎使用该选项 |
-P | 保存memcached进程的pid文件 |
-s <file> | 指定Memcached用于监听的UNIX socket文件 |
-a <perms> | 设置-s选项指定的UNIX socket文件的权限 |
-U <num> | 指定监听UDP的端口,默认11211,0表示关闭 |
-M | 当内存使用超出配置值时,禁止自动清除缓存中的数据项,此时Memcached不可以,直到内存被释放 |
-r | 设置产生core文件大小 |
-f <factor> | 用于计算缓存数据项的内存块大小的乘数因子,默认是1.25 |
-n | 为缓存数据项的key、value、flag设置最小分配字节数,默认是48 |
-C | 禁用CAS |
-h | 显示Memcached版本和摘要信息 |
-v | 输出警告和错误信息 |
-vv | 打印信息比-v更详细:不仅输出警告和错误信息,也输出客户端请求和响应信息 |
-i | 打印libevent和Memcached的licenses信息 |
-t <threads> | 指定用来处理请求的线程数,默认为4 |
-D <char> | 用于统计报告中Key前缀和ID之间的分隔符,默认是冒号“:” |
-L | 尝试使用大内存分页(pages) |
-B <proto> | 指定使用的协议,默认行为是自动协商(autonegotiate),可能使用的选项有auto、ascii、binary。 |
-I <size> | 覆盖默认的STAB页大小,默认是1M |
-F | 禁用flush_all命令 |
-o <options> | 指定逗号分隔的选项,一般用于用于扩展或实验性质的选项 |
可以通过Linux的如下命令查询到Memcached的进程号:
1 | ps -ef | grep memcached |
然后杀掉Memcached服务进程:
-9表示强制杀掉进程。
Memcached启动以后,可以通过客户端来操作缓存中的数据,我们说明一些常用的客户端,及其使用方法。
Telnet客户端
Telnet客户端可以通过命令行的方式来监控查看Memcached服务器存储数据的情况。例如,Memcached的服务地址为192.168.4.86:11211,可以telnet到该服务端口:
1 | telnet 192.168.4.86 11211 |
如果连接成功,可以使用如下一些命令:
该命令用于显示服务器信息、统计数据等,结果示例数据(来自www.2cto.com网站),例如:
01 | STAT pid 22362 //memcache服务器的进程ID www.2cto.com |
02 | STAT uptime 1469315 //服务器已经运行的秒数 |
03 | STAT time 1339671194 //服务器当前的unix时间戳 |
04 | STAT version 1.4.9 //memcache版本 |
05 | STAT libevent 1.4.9-stable //libevent版本 |
06 | STAT pointer_size 64 //当前操作系统的指针大小(32位系统一般是32bit,64就是64位操作系统) |
07 | STAT rusage_user 3695.485200 //进程的累计用户时间 |
08 | STAT rusage_system 14751.273465 //进程的累计系统时间 |
09 | STAT curr_connections 69 //服务器当前存储的items数量 |
10 | STAT total_connections 855430 //从服务器启动以后存储的items总数量 |
11 | STAT connection_structures 74 //服务器分配的连接构造数 |
12 | STAT reserved_fds 20 // |
13 | STAT cmd_get 328806688 //get命令(获取)总请求次数 |
14 | STAT cmd_set 75441133 //set命令(保存)总请求次数 www.2cto.com |
15 | STAT cmd_flush 34 //flush命令请求次数 |
16 | STAT cmd_touch 0 //touch命令请求次数 |
17 | STAT get_hits 253547177 //总命中次数 |
18 | STAT get_misses 75259511 //总未命中次数 |
19 | STAT delete_misses 4 //delete命令未命中次数 |
20 | STAT delete_hits 565730 //delete命令命中次数 |
21 | STAT incr_misses 0 //incr命令未命中次数 |
22 | STAT incr_hits 0 //incr命令命中次数 |
23 | STAT decr_misses 0 //decr命令未命中次数 |
24 | STAT decr_hits 0 //decr命令命中次数 |
25 | STAT cas_misses 0 //cas命令未命中次数 |
26 | STAT cas_hits 0 //cas命令命中次数 |
27 | STAT cas_badval 0 //使用擦拭次数 |
28 | STAT touch_hits 0 //touch命令未命中次数 |
29 | STAT touch_misses 0 //touch命令命中次数 |
30 | STAT auth_cmds 0 //认证命令处理的次数 |
31 | STAT auth_errors 0 //认证失败数目 |
32 | STAT bytes_read 545701515844 //总读取字节数(请求字节数) |
33 | STAT bytes_written 1649639749866 //总发送字节数(结果字节数) |
34 | STAT limit_maxbytes 2147483648 //分配给memcache的内存大小(字节) |
35 | STAT accepting_conns 1 //服务器是否达到过最大连接(0/1) |
36 | STAT listen_disabled_num 0 //失效的监听数 |
37 | STAT threads 4 //当前线程数 |
38 | STAT conn_yields 14 //连接操作主动放弃数目 |
39 | STAT hash_power_level 16 // |
40 | STAT hash_bytes 524288 |
41 | STAT hash_is_expanding 0 |
42 | STAT expired_unfetched 30705763 |
43 | STAT evicted_unfetched 0 |
44 | STAT bytes 61380700 //当前存储占用的字节数 |
45 | STAT curr_items 28786 //当前存储的数据总数 |
46 | STAT total_items 75441133 //启动以来存储的数据总数 |
47 | STAT evictions 0 //为获取空闲内存而删除的items数(分配给memcache的空间用满后需要删除旧的items来得到空间分配给新的items) |
48 | STAT reclaimed 39957976 //已过期的数据条目来存储新数据的数目 |
上面给出了各个统计项的含义说明,不再累述。
stats命令有几个二级子项,说明如下表所示:
命令 | 含义说明 |
stats slabs | 显示各个slab的信息,包括chunk的大小、数目、使用情况等 |
stats items | 显示各个slab中item的数目和最老item的年龄(最后一次访问距离现在的秒数) |
stats detail [on|off|dump] | 设置或者显示详细操作记录; 参数为on,打开详细操作记录; 参数为off,关闭详细操作记录; 参数为dump,显示详细操作记录(每一个键值get、set、hit、del的次数) |
stats malloc | 打印内存分配信息 |
stats sizes | 打印缓存使用信息 |
stats reset | 重置统计信息 |
下面的命令,我们通过表格的形式说明,如下表所示:
命令 | 用法格式 | 含义说明 | 示例 |
get | get <key>*\r\n | 用于获取缓存的数据,键为key。 | get name VALUE name 0 7 shirdrn END |
gets | gets <key>*\r\n | 用于获取缓存的数据,键为一组key。 | gets name hobby VALUE name 1 7 1234567 VALUE hobby 0 25 tenis basketball football END |
set | set <key> <flags> <exptime> <bytes> [noreply]\r\n<value>\r\n | 向缓存中存储数据,不管key对应的值存在与否,都设置key对应的值。 | set name 0 1800 7 shirdrn STORED get name VALUE name 0 7 shirdrn END |
touch | touch <key> <exptime> [noreply]\r\n | 更新缓存中key对应的值的过期时间。 | touch name 1800 |
delete | delete <key> [<time>] [noreply]\r\n | 给定键key,删除缓存中key对应的数据。 | delete name 60 |
add | add <key> <flags> <exptime> <bytes> [noreply]\r\n<value>\r\n | 向缓存中存储数据,只有key对应的值不存在时,才会设置key对应的值。 | add hobby 0 1800 10 basketball STORED get hobby VALUE hobby 0 10 basketball END |
replace | replace <key> <flags> <exptime> <bytes> [noreply]\r\n<value>\r\n | 覆盖一个已经存在Key及其对应的Value,替换一定要保证替换后的值的长度原始长度相同,否则replace失败。 | get name VALUE name 0 7 shirdrn END replace name 0 1800 7 youak47 STORED get name VALUE name 0 7 youak47 END |
append | append <key> <flags> <exptime> <bytes> [noreply]\r\n<value>\r\n | 在一个已经存在的数据值(value)上追加,是在数据值的后面追加。 | get hobby VALUE hobby 0 10 basketball END append hobby 0 1800 9 football STORED get hobby VALUE hobby 0 19 basketball football END |
prepend | prepend <key> <flags> <exptime> <bytes> [noreply]\r\n<value>\r\n | 在一个已经存在的数据值(value)上追加,是在数据值的前面追加。 | get hobby VALUE hobby 0 19 basketball football END prepend hobby 0 1800 6 tenis STORED get hobby VALUE hobby 0 25 tenis basketball football END |
incr | incr <key> <value> [noreply]\r\n | 计数命令,可以在原来已经存在的数字上进行累加求和,计算并存储新的数值。 | set active_users 0 1000000 7 1000000 STORED get active_users VALUE active_users 0 7 1000000 END incr active_users 99 1000099 |
decr | decr <key> <value> [noreply]\r\n | 计数命令,可以在原来已经存在的数字上进行减法计算,计算并存储新的数值。 | get active_users VALUE active_users 0 7 1000099 END decr active_users 3456 996643 |
flush_all | flush_all [<time>] [noreply]\r\n | 使缓存中的数据项失效,可选参数是在多少秒后失效。 | flush_all 1800 |
version | version\r\n | 返回Memcached服务器的版本信息。 | version |
quit | quit\r\n | 退出telnet终端。 | quit |
Java客户端
可以使用Java语言编写代码来访问Memcached缓存。目前,可以使用的Java客户端很多,这里简单介绍几个。
示例代码,如下所示:
01 | package org.shirdrn.spymemcached; |
03 | import net.spy.memcached.AddrUtil; |
04 | import net.spy.memcached.BinaryConnectionFactory; |
05 | import net.spy.memcached.MemcachedClient; |
06 | import net.spy.memcached.internal.OperationFuture; |
08 | public class TestSpymemcached { |
10 | public static void main(String[] args) throws Exception { |
11 | String address = "192.168.4.86:11211" ; |
12 | MemcachedClient client = new MemcachedClient( new BinaryConnectionFactory(), |
13 | AddrUtil.getAddresses(address)); |
15 | String key = "magic_words" ; |
19 | OperationFuture<Boolean> setFuture = client.set(key, exp, o); |
22 | System.out.println(client.get(key)); |
25 | client.append(key, " the world!" ); |
26 | System.out.println(client.get(key)); |
29 | client.prepend(key, "Stone, " ); |
30 | System.out.println(client.get(key)); |
33 | o = "This is a test for spymemcached." ; |
34 | OperationFuture<Boolean> replaceFuture = client.replace(key, exp, o); |
35 | if (replaceFuture.get()) { |
36 | System.out.println(client.get(key)); |
40 | System.out.println(client.get(key)); |
更多用法,可以参考后面的链接。
示例代码,如下所示:
001 | package org.shirdrn.xmemcached; |
004 | import java.io.IOException; |
005 | import java.io.Serializable; |
006 | import java.net.InetSocketAddress; |
007 | import java.util.Arrays; |
008 | import java.util.List; |
009 | import java.util.Map; |
010 | import java.util.concurrent.ExecutorService; |
011 | import java.util.concurrent.Executors; |
012 | import java.util.concurrent.TimeoutException; |
013 | import java.util.concurrent.atomic.AtomicLong; |
015 | import net.rubyeye.xmemcached.CASOperation; |
016 | import net.rubyeye.xmemcached.GetsResponse; |
017 | import net.rubyeye.xmemcached.MemcachedClient; |
018 | import net.rubyeye.xmemcached.XMemcachedClientBuilder; |
019 | import net.rubyeye.xmemcached.command.BinaryCommandFactory; |
020 | import net.rubyeye.xmemcached.exception.MemcachedException; |
021 | import net.rubyeye.xmemcached.utils.AddrUtil; |
023 | public class UsingXMemcachedClient { |
025 | public static void main(String[] args) throws IOException { |
026 | String servers = "192.168.4.86:11211" ; |
028 | XMemcachedClientBuilder builder = new XMemcachedClientBuilder( |
029 | AddrUtil.getAddresses(servers)); |
030 | builder.setCommandFactory( new BinaryCommandFactory()); |
031 | final MemcachedClient client = builder.build(); |
034 | final String key = "ghost" ; |
037 | client.add(key, 0 , "Ghost wind blows!" ); |
038 | System.out.println( "add & get: " + client.get(key)); |
041 | client.append(key, " It's a lie." ); |
042 | System.out.println( "append & get: " + client.get(key)); |
045 | client.prepend(key, "Who's said?! " ); |
046 | System.out.println( "prepend & get: " + client.get(key)); |
049 | client.replace(key, 0 , "Everything is nothing!" ); |
050 | System.out.println( "replace & get: " + client.get(key)); |
054 | System.out.println( "delete & get: " + client.get(key)); |
057 | List<String> keys = Arrays.asList( new String[] { |
058 | "key1" , "key2" , "key3" |
060 | for (String k : keys) { |
061 | client.set(k, 3600 , "v:" + System.nanoTime()); |
063 | Map<String, GetsResponse<Object>> values = client.gets(keys); |
064 | for (Map.Entry<String, GetsResponse<Object>> entry : values.entrySet()) { |
065 | System.out.println( "key=" + entry.getKey() + ", value=" + entry.getValue().getValue()); |
069 | final AtomicLong seq = new AtomicLong(System.nanoTime()); |
070 | ExecutorService pool = Executors.newCachedThreadPool(); |
071 | for ( int i= 0 ; i< 10 ; i++) { |
072 | pool.execute( new Runnable() { |
076 | CacheResult o = new CacheResult(); |
077 | o.file = new File( "/opt/status/servers.lst" ); |
078 | o.lastmodified = seq.incrementAndGet(); |
079 | System.out.println( "#" + Thread.currentThread().getId() + "=>o: " + o); |
081 | client.set(key, 0 , o); |
083 | } catch (TimeoutException e) { |
086 | } catch (InterruptedException e) { |
089 | } catch (MemcachedException e) { |
098 | for ( int i= 0 ; i< 10 ; i++) { |
099 | client.cas(key, new CASOperation<CacheResult>() { |
101 | public int getMaxTries() { |
105 | public CacheResult getNewValue( long arg0, CacheResult result) { |
106 | CacheResult old = result; |
107 | CacheResult nu = new CacheResult(); |
109 | nu.lastmodified = seq.incrementAndGet(); |
110 | System.out.println( "cas: old=" + old + ", new=" + nu); |
121 | List<InetSocketAddress> addresses = AddrUtil.getAddresses(servers); |
122 | for (InetSocketAddress addr : addresses) { |
123 | Map<String, String> stats = client.stats(addr); |
124 | System.out.println(stats); |
127 | } catch (TimeoutException e) { |
129 | } catch (InterruptedException e) { |
131 | } catch (MemcachedException e) { |
135 | synchronized (client) { |
138 | } catch (InterruptedException e) { |
145 | static class CacheResult implements Serializable { |
146 | private static final long serialVersionUID = 3349686173080590047L; |
148 | private long lastmodified; |
150 | public String toString() { |
151 | return "file=[" + file + ", lastmodified=" + lastmodified + "]" ; |
Node.js客户端
Memcached客户端代码的逻辑都非常类似,这里对Node.js简单举例说明,代码如下所示:
03 | var MemcachedClient = require( 'memcached' ); |
06 | var servers = [ '192.168.4.86:11211' ]; |
07 | var client = new MemcachedClient(servers); |
13 | var value = 'Ghost wind blows!' ; |
14 | client.set(key, 0, value, function (err) { |
15 | var data = 'key=' + key + ', value=' + value; |
17 | console.error( 'Fail to set: ' + data); |
19 | console.log( 'Added: ' + data); |
24 | var valueGot = client.get(key, function (err, data) { |
25 | var dataGot = 'key=' + key + ', valueGot=' + data; |
27 | console.error( 'Fail to get: ' + dataGot); |
29 | console.log( 'Got: ' + dataGot); |
参考链接