Python基于内存缓存的实现

整体设计思路是使用字典来进行存储键值对。
过期时间?想要知道一个缓存的 key 是否失效,就必须知道这个 key 是啥时候放进去的,所以需要有一个 put_time 记录;
同时需要设置失效时间,所以还需要一个多长时间失效的 expired 记录;

那么现在的字典格式就变成了:

{ key: [value, put_time, expired]}

后面的 list 可以进一步封装为一个 Value 对象

class Value:
    def __init__(self, value, put_time, expired):
        """
        :param value: 具体的值
        :param put_time: 放入缓存的时间
        :param expired: 缓存失效时间
        """
        self.value = value
        self.put_time = put_time
        self.expired = expired

现在字典的样子就变成了:

{ key: Value(value, put_time, expired) }

1.取值放值逻辑

# 放值的时候需要设置一下「放入的时间」和「过期时间」还有「具体的值」这三个字段
def set_value(self, k, v, expired):
    """
    :param k: 缓存的 key
    :param v: 缓存值
    :param expired: 缓存失效时间,单位秒(s)
    """
    current_timestamp = int(time.time())  # 获取当前时间戳
    value = Value(v, current_timestamp, expired)
    self.__cache[k] = value
    logger.info("已放入缓存, key: {} {}", k, value)

# 取值的时候需要检查是否过期,过期:删除 key,不让它占内存了;不过期:去除 key 对应的 value 返回
def check_key(self, k):
    """
    :param k: 缓存 key
    :return: True or False
    """
    current_timestamp = int(time.time())
    value = self.__cache.get(k, None)
    # 考虑k不存在的情况
    if value is None:
        return False
    differ = current_timestamp - value.put_time
    if differ > value.expired:
        del self.__cache[k]  # 证明缓存失效了,删除键值对
        logger.info("缓存已失效, key: {}", k)
        return False
    return True

def get_value(self, k):
    """
    :param k: key
    :return: value
    """
    if self.check_key(k):
        return self.__cache[k].value
    return None

2.如何全局使用一个缓存对象呢?

python 的模块就是天然的单例模式,因为模块在第一次导入时,会生成 .pyc 文件,当第二次导入时,就会直接加载 .pyc 文件,而不会再次执行模块代码。因此,我们只需把相关的函数和数据定义在一个模块中,就可以获得一个单例对象了。如果我们真的想要一个单例类,可以考虑这样做:

class Singleton(object):
    def foo(self):
        pass
singleton = Singleton()

使用:

from a import singleton # 调的是类实例化出来的的对象singleton,而不是类Singleton

3.整体代码

# filename:cache.py
import time
from loguru import logger # 第三方日志模块,需要安装 pip3 install loguru


class Value:
    def __init__(self, value, put_time, expired):
        """
        缓存值对象
        :param value: 具体的值
        :param put_time: 放入缓存的时间
        :param expired: 缓存失效时间
        """
        self.value = value
        self.put_time = put_time
        self.expired = expired

    def __str__(self):
        return f"value: {self.value}  put_time: {self.put_time}  expired: {self.expired}"

#Python小白学习交流群:711312441
class MemoryCache:

    def __init__(self):
        self.__cache = {}

    def set_value(self, k, v, expired):
        """
        将值放入缓存中
        :param k: 缓存的 key
        :param v: 缓存值
        :param expired: 缓存失效时间,单位秒(s)
        """
        current_timestamp = int(time.time())  # 获取当前时间戳
        value = Value(v, current_timestamp, expired)
        self.__cache[k] = value
        logger.info("已放入缓存, key: {} {}", k, value)

    def check_key(self, k):
        """
        检查缓存是否可用
        :param k: 缓存 key
        :return: True or False
        """
        current_timestamp = int(time.time())
        value = self.__cache.get(k, None)
        # 考虑k不存在的情况
        if value is None:
            return False
        differ = current_timestamp - value.put_time
        if differ > value.expired:
            del self.__cache[k]  # 证明缓存失效了,删除键值对
            logger.info("缓存已失效, key: {}", k)
            return False
        return True

    def get_value(self, k):
        """
        通过缓存key获取值
        :param k: key
        :return: value
        """
        if self.check_key(k):
            return self.__cache[k].value
        return None


memory_cache = MemoryCache()

使用

# 测试放入一个 3 秒过期的缓存,再放入一个 6 秒过期的,然后 sleep 5 秒
# 看看 6 秒过期的缓存是否可以正常取出,3 秒过期的缓存是否失效,进行验证
# filename:test.py
import time
from cache import memory_cache
memory_cache.set_value('my_blog', 'sunnyc.icu', 3)  # 设置一个 3 秒过期的键值对
memory_cache.set_value('my_github', 'hczs', 6)  # 设置一个 6 秒过期的键值对
time.sleep(5)
print('my_blog: ', memory_cache.get_value('my_blog'))
print('my_github: ', memory_cache.get_value('my_github'))

# 测试结果
2022-08-30 10:53:34.021 | INFO     | cache:set_value:43 - 已放入缓存, key: my_blog value: sunnyc.icu  put_time: 1647658414  expired: 3
2022-08-30 10:53:34.021 | INFO     | cache:set_value:43 - 已放入缓存, key: my_github value: hczs  put_time: 1647658414  expired: 6
my_blog:  None
my_github:  hczs
2022-08-30 10:53:39.032 | INFO     | cache:check_key:60 - 缓存已失效, key: my_blog
  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Python内存泄露是指在程序中存在未释放的内存空间问题,导致内存持续增长,最终可能导致程序崩溃或性能下降。下面是一些常见的查找和解决Python内存泄露问题的方法: 1. 使用内存分析工具:可以使用第三方库如`heapy`或`pympler`等进行内存分析。这些工具可以帮助你查看程序中的对象、内存使用情况和引用关系,从而找到可能导致内存泄露的原因。 2. 检查引用计数:Python中的内存管理是基于引用计数的,当一个对象没有引用时,会被垃圾回收机制自动回收内存。因此,检查对象的引用计数是否正常是查找内存泄露的一种方法。 3. 检查循环引用:在Python中,如果两个对象互相引用,而没有其他对象引用它们,那么这种情况下的内存就无法被垃圾回收机制回收,出现内存泄露。因此,需要检查代码中的循环引用问题,及时解除这些引用。 4. 检查资源释放:有些资源在使用后需要手动释放,比如打开的文件、数据库连接等。如果在使用完毕后没有及时关闭或释放,就会造成资源泄露,进而导致内存泄露。因此,务必确保在使用完毕后进行适当的关闭或释放操作。 5. 减少不必要的缓存缓存常常是提高程序性能的手段,但是过多的缓存可能会导致内存占用增加。因此,需要评估和控制缓存数据的大小,避免不必要的数据缓存。 总之,查找和解决Python内存泄露问题需要使用工具进行内存分析,检查引用计数和循环引用,确认是否释放资源,以及减少不必要的缓存。通过这些方法,可以有效地定位内存泄露问题,并采取相应的措施加以解决。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值