《Redis源码学习笔记》键过期

Redis可以为数据库中的每一个键关联一个过期时间,当到达指定时间后Redis就会把该键从数据库中删除,eg: 

Shell代码   收藏代码
  1. redis 127.0.0.1:6379> setex name 5 diaocow   # 为键name设置5秒的过期时间  
  2. OK  
  3. redis 127.0.0.1:63795 秒后...  
  4. redis 127.0.0.1:6379> get name   # 键过期被删除,返回nil  
  5. (nil)  

那这一切Redis究竟是怎么实现的呢?  

1. 在RedisDb中维护了一个expires字典,其中的键就是那些已经设置了过期时间的键,而键值就是该键的过期时间(毫秒): 

 

2. 当我们去操作数据库中的一个键时(或读或写),Redis会首先检查该键是否已经过期(用当前时间去和键的过期时间比较),如果过期就删除,否则执行正常的操作流程,这种删除方式我们称作:惰性删除,伪代码: 
Python代码   收藏代码
  1. def expireIfNeeded(key)  
  2.     # 获取该键的过期时间  
  3.     when_msec = redisDb.expires.get(key)  
  4.     # 该键没有关联任何过期时间  
  5.     if when_msec is None:   
  6.         return False  
  7.     # 未过期  
  8.     if now_msec < when_msec:   
  9.         return False  
  10.     # 已经过期  
  11.     redisDb.data.del(key)       # 从数据库中删除该键  
  12.     redisDb.expires.del(key)      
  13.     propagateExpire(key)        # 把键过期消息同步给所有的slave节点(如果有必要)  
  14.     return True  

具体细节请看:db.c/expireIfNeeded函数 

3. 在服务器的常规计划任务中(serverCron),Redis会定期清理数据库中过期的键,具体过程为:循环每个数据库,从expires字典中随机挑选若干键,检查是否过期,如果过期就删除(这种删除方式,我们称作:定期删除);为了防止这种清理过期键方式占用太多时间从而阻塞客户端请求(因为Redis是单线程的),Redis每当迭代了一定次数,就会检查已经运行了多长时间,并且当运行时间超过指定时间时,就结束清理过期键,伪代码: 
Python代码   收藏代码
  1. def activeExpireCycle()  
  2.     # activeExpireCycle函数能够运行的时间限制   
  3.     timelimit = THIS_FUNCTION_CAN_RUN_MS  
  4.     start_time = time.now()  
  5.       
  6.     for dbnum in redisServer.dbs:  
  7.         # 随机从标号为dbnum的数据库中取出MAX_EXPIRELOOKUPS_PER_CRON个键,检测是否过期  
  8.         for (i = 1; i < MAX_EXPIRELOOKUPS_PER_CRON; i++):  
  9.             if isKeyExpired(redisDbs[dbnum].expires.getRandomKey()):  
  10.                 # 若过期,清理键  
  11.                 redisDbs[dbnum].data.del(key)  
  12.                 redisDbs[dbnum].expires.del(key)  
  13.                 propagateExpire(key)  
  14.         # 检测目前运行时间,若超过timelimit,则推出  
  15.         if(time.now() - start_time >= timelimit): return  

具体细节请看:redis.c/activeExpireCycle函数 

键过期对slave和master的影响:  

1. 当master删除一个过期键时,它会通过DEL KEY-NAME命令,把这“删除消息”传播给它的slaves: 

 

2. 当客户端向slave请求一个过期键时,它仅仅告知客户端该键不存在(返回nil),而不会真的去删除这个键,只有当它收到master发过来的DEL命令时,它才会去删除一个键; 

3. slave和master这样的做法(1和2)都是为了保证master-slave数据的一致性; 

4. master/slave在保存RDB文件时会过滤那些已经过期的键,从而尽可能保证,存到RDB文件中的数据都是有效的(注意:这里只是过滤而不是删除); 

5. 非slave在加载RDB文件时同样也会过滤掉那些已经过期的键,从而尽可能保证,加载到内存中的数据都是有效的(当slave加载RDB文件时,它会全数加载,而不经过任何判断和过滤(即使加载的那个键已经过期),而这一切同样是出于数据一致性考虑的) 

总结:  
1. 熟悉键过期相关命令:setex expire ttl 
2. 了解键过期实现原理; 
3. 了解键过期对master/slave的影响 
数据中心机房是现代信息技术的核心设施,它承载着企业的重要数据和服务,因此,其基础设计与规划至关重要。在制定这样的方案时,需要考虑的因素繁多,包括但不限于以下几点: 1. **容量规划**:必须根据业务需求预测未来几年的数据处理和存储需求,合理规划机房的规模和设备容量。这涉及到服务器的数量、存储设备的容量以及网络带宽的需求等。 2. **电力供应**:数据中心是能源消耗大户,因此电力供应设计是关。要考虑不间断电源(UPS)、备用发电机的容量,以及高效节能的电力分配系统,确保电力的稳定供应并降低能耗。 3. **冷却系统**:由于设备密集运行,散热问题不容忽视。合理的空调布局和冷却系统设计可以有效控制机房温度,避免设备过热引发故障。 4. **物理安全**:包括防火、防盗、防震、防潮等措施。需要设计防火分区、安装烟雾探测和自动灭火系统,设置访问控制系统,确保只有授权人员能进入。 5. **网络架构**:规划高速、稳定、冗余的网络架构,考虑使用光纤、以太网等技术,构建层次化网络,保证数据传输的高效性和安全性。 6. **运维管理**:设计易于管理和维护的IT基础设施,例如模块化设计便于扩展,集中监控系统可以实时查看设备状态,及时发现并解决问题。 7. **绿色数据中心**:随着环保意识的提升,绿色数据中心成为趋势。采用节能设备,利用自然冷源,以及优化能源管理策略,实现低能耗和低碳排放。 8. **灾难恢复**:考虑备份和恢复策略,建立异地灾备中心,确保在主数据中心发生故障时,业务能够快速恢复。 9. **法规遵从**:需遵循国家和地区的相关法律法规,如信息安全、数据保护和环境保护等,确保数据中心的合法运营。 10. **扩展性**:设计时应考虑到未来的业务发展和技术进步,保证机房有充足的扩展空间和升级能力。 技术创新在数据中心机房基础设计及规划方案中扮演了重要角色。例如,采用虚拟化技术可以提高硬件资源利用率,软件定义网络(SDN)提供更灵活的网络管理,人工智能和机器学习则有助于优化能源管理和故障预测。 总结来说,一个完整且高效的数据中心机房设计及规划方案,不仅需要满足当前的技术需求和业务目标,还需要具备前瞻性和可持续性,以适应快速变化的IT环境和未来可能的技术革新。同时,也要注重经济效益,平衡投资成本与长期运营成本,实现数据中心的高效、安全和绿色运行。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值