1.redis
redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)和hash(哈希类型)。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作,而且这些操作都是原子性的。在此基础上,redis支持各种不同方式的排序。与memcached一样,为了保证效率,数据都是缓存在内存中。区别的是redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件,并且在此基础上实现了master-slave(主从)同步。
2.python操作redis
API使用
redis-py 的API的使用可以分类为:
连接方式
连接池
操作
String 操作
Hash 操作
List 操作
Set 操作
Sort Set 操作
管道
发布订阅
1、操作模式
redis-py提供两个类Redis和StrictRedis用于实现Redis的命令,StrictRedis用于实现大部分官方的命令,并使用官方的语法和命令,Redis是StrictRedis的子类,用于向后兼容旧版本的redis-py。
#!/usr/bin/env python#-*- coding:utf-8 -*-
importredis
r= redis.Redis(host='10.211.55.4', port=6379)
r.set('foo', 'Bar')print r.get('foo')
2、连接池
redis-py使用connection pool来管理对一个redis server的所有连接,避免每次建立、释放连接的开销。默认,每个Redis实例都会维护一个自己的连接池。可以直接建立一个连接池,然后作为参数Redis,这样就可以实现多个Redis实例共享一个连接池。
#!/usr/bin/env python#-*- coding:utf-8 -*-
importredis
pool= redis.ConnectionPool(host='10.211.55.4', port=6379)
r= redis.Redis(connection_pool=pool)
r.set('foo', 'Bar')print r.get('foo')
3、操作
String操作,redis中的String在在内存中按照一个name对应一个value来存储。如图:
set(name, value, ex=None, px=None, nx=False, xx=False)
在Redis中设置值,默认,不存在则创建,存在则修改
参数:
ex,过期时间(秒)
px,过期时间(毫秒)
nx,如果设置为True,则只有name不存在时,当前set操作才执行
xx,如果设置为True,则只有name存在时,岗前set操作才执行
setnx(name, value)
设置值,只有name不存在时,执行设置操作(添加)
setex(name, value, time)
#设置值#参数:
#time,过期时间(数字秒 或 timedelta对象)
Hash操作,redis中Hash在内存中的存储格式如下图:
hset(name, key, value)
#name对应的hash中设置一个键值对(不存在,则创建;否则,修改)
#参数:
#name,redis的name
#key,name对应的hash中的key
#value,name对应的hash中的value#注:
#hsetnx(name, key, value),当name对应的hash中不存在当前key时则创建(相当于添加)
hmset(name, mapping)
#在name对应的hash中批量设置键值对#参数:
#name,redis的name
#mapping,字典,如:{'k1':'v1', 'k2': 'v2'}#如:
#r.hmset('xx', {'k1':'v1', 'k2': 'v2'})
List操作,redis中的List在在内存中按照一个name对应一个List来存储。
lpush(name,values)
#在name对应的list中添加元素,每个新的元素都添加到列表的最左边#如:
#r.lpush('oo', 11,22,33)
#保存顺序为: 33,22,11#扩展:
#rpush(name, values) 表示从右向左操作
lpushx(name,values)
#在name对应的list中添加元素,只有name已经存在时,值添加到列表的最左边
#更多:
#rpushx(name, value) 表示从右向左操作
llen(name)
#name对应的list元素的个数
Set操作,Set集合就是不允许重复的列表
sadd(name,values)
#name对应的集合中添加元素
scard(name)
获取name对应的集合中元素个数
sdiff(keys,*args)
在第一个name对应的集合中且不在其他name对应的集合的元素集合
sdiffstore(keys,*args)
#获取第一个name对应的集合中且不在其他name对应的集合,再将其新加入到dest对应的集合中
有序集合,在集合的基础上,为每元素排序;元素的排序需要根据另外一个值来进行比较,所以,对于有序集合,每一个元素有两个值,即:值和分数,分数专门用来做排序
zadd(name,*args,**kwargs)
#在name对应的有序集合中添加元素#如:
#zadd('zz', 'n1', 1, 'n2', 2)
#或
#zadd('zz', n1=11, n2=22)
zcard(name)
#获取name对应的有序集合元素的数量
其他常用操作
delete(*names)
#根据删除redis中的任意数据类型
exists(name)
#检测redis的name是否存在
keys(pattern='*')
#根据模型获取redis的name#更多:
#KEYS * 匹配数据库中所有 key 。
#KEYS h?llo 匹配 hello , hallo 和 hxllo 等。
#KEYS h*llo 匹配 hllo 和 heeeeello 等。
#KEYS h[ae]llo 匹配 hello 和 hallo ,但不匹配 hillo
4、管道
redis-py默认在执行每次请求都会创建(连接池申请连接)和断开(归还连接池)一次连接操作,如果想要在一次请求中指定多个命令,则可以使用pipline实现一次请求指定多个命令,并且默认情况下一次pipline 是原子性操作。
#!/usr/bin/env python#-*- coding:utf-8 -*-
importredis
pool= redis.ConnectionPool(host='10.211.55.4', port=6379)
r= redis.Redis(connection_pool=pool)#pipe = r.pipeline(transaction=False)
pipe = r.pipeline(transaction=True)
pipe.set('name', 'alex')
pipe.set('role', 'sb')
pipe.execute()
5、发布订阅
发布者:服务器
订阅者:Dashboad和数据处理
Demo如下:
#!/usr/bin/env python#-*- coding:utf-8 -*-
importredisclassRedisHelper:def __init__(self):
self.__conn = redis.Redis(host='10.211.55.4')
self.chan_sub= 'fm104.5'self.chan_pub= 'fm104.5'
defpublic(self, msg):
self.__conn.publish(self.chan_pub, msg)returnTruedefsubscribe(self):
pub= self.__conn.pubsub()
pub.subscribe(self.chan_sub)
pub.parse_response()return pub
订阅者:
#!/usr/bin/env python#-*- coding:utf-8 -*-
from monitor.RedisHelper importRedisHelper
obj=RedisHelper()
redis_sub=obj.subscribe()whileTrue:
msg=redis_sub.parse_response()print msg
发布者:
#!/usr/bin/env python#-*- coding:utf-8 -*-
from monitor.RedisHelper importRedisHelper
obj=RedisHelper()
obj.public('hello')
更多参见:https://github.com/andymccurdy/redis-py/
http://doc.redisfans.com/